Senior Data Engineer

AtlantisJobs; Wrocław; Hybrid; PLN 180,000 - 260,000; Full time

Job summary

AtlantisJobs poszukuje Senior Data Engineer, specjalizującego się w end-to-end inżynierii danych w nowoczesnych architekturach chmurowych. Będziesz zarządzać produktami danych MDM, optymalizować przepływy i prowadzić migrację z systemów legacy do Azure i Databricks.

Praca w zespołach produktowych agile, 3 dni w biurze.

Qualifications

• Doświadczenie hands-on end-to-end w platformach analitycznych, produktach danych i hurtowniach danych.
• Ekspercka znajomość SQL/T-SQL, Pythona, Apache Spark, Databricks, Delta Lake, Azure Data Factory.
• Doświadczenie w wzorcach batch/incremental/CDC/event-driven.
• Modelowanie danych (logiczne/fizyczne) oraz projektowanie ETL/ELT.
• Rozwój i utrzymanie API oraz praca w środowiskach cloud-native (Azure).
• Modernizacja systemów legacy (SSIS do chmury) i migracje.

Responsibilities

• End-to-end inżynieria danych w nowoczesnych architektura chmurowych.
• Zarządzanie produktami danych MDM oraz optymalizacja przepływów danych.
• Migracja z SSIS i MS SQL Server BI do Azure i Databricks.
• Praca w zespołach agile, 3 dni w biurze.

Skills

SQL / T-SQL

Python

Apache Spark

Databricks

Delta Lake

Azure Data Factory

Batch processing

Incremental loading

CDC

Event-driven

Data modeling

ETL/ELT design

API development

Azure native

SSIS

MS SQL Server

C#

Legacy modernization

Tools

SSIS

MS SQL Server

C#

Job description

Rola Senior Data Engineer skupiona na end-to-end inżynierii danych w nowoczesnych architekturach chmurowych — zarządzanie produktami danych MDM, optymalizacja przepływów i migracja z systemów legacy (SSIS, MS SQL Server BI) do Azure i Databricks. Praca w zespołach produktowych agile, 3 dni w biurze.

Szczera uwaga: lista wymagań jest bardzo szeroka i może wskazywać na oczekiwanie kompetencji całego zespołu od jednej osoby — warto zweryfikować realny zakres odpowiedzialności.

• silne doświadczenie end-to-end w platformach analitycznych, produktach danych i hurtowniach danych (Star schema, Data Vault, wielowymiarowe, tabelaryczne)
• ekspercka znajomość SQL/T-SQL, Python, Apache Spark, Databricks, Delta Lake, Azure Data Factory
• doświadczenie w wzorcach batch/incremental/CDC/event-driven
• doświadczenie w modelowaniu danych (logiczne/fizyczne) oraz projektowaniu ETL/ELT (wydajne pakiety SSIS, komponenty skryptowe w C#)
• doświadczenie w rozwoju i utrzymaniu API
• doświadczenie w środowiskach cloud-native (Azure) i modernizacji systemów legacy (SSIS do chmury)
• praca w biurze 3 dni w tygodniu