Senior Data Engineer with Databricks

Xebia Group; Wrocław; On-site; PLN 200,000 - 320,000; Full time

Job summary

Xebia Group w Polsce szuka doświadczonego Data Engineera do projektowania i implementacji skalowalnych pipeline'ów danych na Databricks, standaryzacji istniejących rozwiązań i migracji z użyciem dbt oraz Pythona.

Osoba ta będzie wspierać onboarding nowych zbiorów danych (regiony UE) i współpracować z architektami danych przy transformacjach finansowych.

Qualifications

• Minimum 5 lat doświadczenia jako Data Engineer.
• Praktyczne doświadczenie z Databricks przy pipeline'ach produkcyjnych.
• Bardzo dobra znajomość Pythona do przetwarzania danych.
• Doświadczenie z dbt i warstwami transformacji danych.
• Doświadczenie z systemami legacy i migracją pipeline'ów.
• Doświadczenie z danymi finansowymi lub rynkowymi.
• Praca z regionu UE i pozwolenie na pracę.

Skills

Python

Data transformations

Financial data

Tools

Databricks

dbt

Job description

Projektowanie i implementacja skalowalnych pipeline'ów danych na Databricks, standaryzacja istniejących pipeline'ów, migracja i refaktoryzacja starych rozwiązań oraz transformacje z użyciem dbt i Python. Będziesz też wspierać onboarding nowych zbiorów danych (regiony US, APAC) i współpracować z architektami danych. To oferta dla doświadczonego Data Engineera z produkcyjnym Databricks i pracą z danymi finansowymi.

• min. 5 lat doświadczenia jako Data Engineer;
• praktyczne doświadczenie z Databricks przy pipeline'ach produkcyjnych;
• bardzo dobra znajomość Python do przetwarzania danych;
• doświadczenie z dbt i warstwami transformacji danych;
• doświadczenie z systemami legacy i migracją pipeline'ów;
• doświadczenie z danymi finansowymi lub rynkowymi;
• praca z regionu Unii Europejskiej i pozwolenie na pracę