Senior Data Engineer - Databricks & Lakehouse Architect

Traffit; Warszawa; On-site; PLN 180,000 - 260,000; Full time

Job summary

In4ge poszukuje doświadczonego eksperta ds. inżynierii danych odpowiedzialnego za projektowanie i dostarczanie nowoczesnych platform danych opartych na chmurze. Rola kładzie nacisk na Databricks, Data Lakehouse i governance, z silnym wpływem na architekturę platformy.

Wymagane zaawansowane umiejętności SQL, Python i Spark, oraz doświadczenie w migracjach i orkiestracji danych w środowisku enterprise. Współpraca z międzynarodowym zespołem i kontrakt B2B, praca w Warszawie.

Qualifications

• Ekspercka wiedza i praktyczne doświadczenie w pracy z Databricks.
• Głębokie zrozumienie i doświadczenie w Data Lakehouse.
• Znajomość data governance i compliance.
• Praktyczne doświadczenie z narzędziami orkiestracji (workflow orchestration) oraz migracjami.
• Biegła znajomość SQL, Python, Spark i usług chmurowych.
• Udokumentowane doświadczenie w dostarczaniu platform danych na poziomie enterprise.
• Angielski min. B2/C1 (komunikacja z klientami i zespołem anglojęzycznym).
• Stabilna współpraca na kontrakcie B2B.
• Wymóg wpływu na architekturę nowoczesnej platformy danych.
• Współpraca z doświadczonym zespołem inżynierskim.

Responsibilities

• Prowadzenie obszaru inżynierii danych oraz nadzór nad wdrażaniem rozwiązań technicznych.
• Projektowanie i implementacja skalowalnych potoków danych oraz frameworków przetwarzania.
• Prowadzenie migracji z dotychczasowych platform orkiestracji do chmurowych rozwiązań.
• Definiowanie standardów zarządzania danymi, mapowania pochodzenia danych i metadanych.
• Wdrażanie wzorców wirtualizacji danych oraz integracja z źródłami danych.
• Optymalizacja wydajności, zapewnienie niezawodności i doskonałości operacyjnej.

Skills

Databricks

Data Lakehouse

Data governance

Workflow orchestration

SQL

Python

Spark

Cloud-native services

English B2/C1

Enterprise-scale platforms

Job description

In4ge poszukuje doświadczonego eksperta ds. inżynierii danych odpowiedzialnego za projektowanie i dostarczanie nowoczesnych platform danych opartych na chmurze. Rola kładzie nacisk na Databricks, Data Lakehouse i governance, z silnym wpływem na architekturę platformy.

Wymagane zaawansowane umiejętności SQL, Python i Spark, oraz doświadczenie w migracjach i orkiestracji danych w środowisku enterprise. Współpraca z międzynarodowym zespołem i kontrakt B2B, praca w Warszawie.