Azure Databricks Data Engineer — Remote & Flexible Hours

Onwelo SA; Polska; Remote; PLN 180,000 - 300,000; Full time

Benefits offered by this job

Elastyczne godziny pracy

Praca zdalna

Szkolenia wewnętrzne

Ubezpieczenie na życie

Job summary

Onwelo SA poszukuje Databricks Data Engineer dołączenia do międzynarodowych projektów dla klientów z branż finansów, retail i sport & lifestyle. Pracować będzie nad budową i modernizacją platform danych w chmurze Azure, w tym nad wdrożeniami opartymi o Azure Databricks.

Zakres obejmuje migracje z on-prem do chmury oraz tworzenie architektury docelowej i kolejnych warstw przetwarzania danych. Oferujemy elastyczne godziny pracy i możliwość pracy zdalnej, wraz z dostępem do szkoleń i rozwoju

Qualifications

• Komercyjne doświadczenie w pracy z Azure Databricks i Apache Spark.
• Swobodna praca z PySpark oraz SQL.
• Zaawansowana znajomość języka Python, w tym projektowanie modułowego i reużywalnego kodu (OOP), obsługa wyjątków, logging, konfiguracja środowisk, pisanie testów i dbałość o jakość kodu.
• Praca zgodnie z najlepszymi praktykami Data Engineering: wersjonowanie kodu, code review, CI/CD, dokumentacja techniczna.
• Znajomość data lake, lakehouse oraz przetwarzaniem dużych wolumenów danych.
• Umiejętność współpracy w środowisku projektowym i komunikacji w języku angielskim

Responsibilities

• Projektowanie, rozwijanie i utrzymywanie pipeline’ów danych w Azure Databricks z użyciem Apache Spark (PySpark, SQL).
• Pisanie wydajnego, czytelnego i testowalnego kodu w Pythonie (OOP), wykorzystywanego w pipeline’ach danych.
• Analiza istniejących procesów danych i projektowanie docelowego kształtu w środowisku Azure.
• Migracja i refaktoryzacja procesów do architektury data lake / lakehouse.
• Optymalizowanie wydajności przetwarzania danych i kosztów chmury.
• Współpraca z zespołami klienta i Onwelo przy projektach data‑driven.
• Dbane o jakość danych, stabilność pipeline’ów oraz dokumentację techniczną

Skills

Azure Databricks

Apache Spark

PySpark

SQL

Python (OOP)

CI/CD

Data Lake/Lakehouse

English

Tools

Azure Databricks

Apache Spark

Python

CI/CD

SQL

Job description

Onwelo SA poszukuje Databricks Data Engineer dołączenia do międzynarodowych projektów dla klientów z branż finansów, retail i sport & lifestyle. Pracować będzie nad budową i modernizacją platform danych w chmurze Azure, w tym nad wdrożeniami opartymi o Azure Databricks.

Zakres obejmuje migracje z on-prem do chmury oraz tworzenie architektury docelowej i kolejnych warstw przetwarzania danych. Oferujemy elastyczne godziny pracy i możliwość pracy zdalnej, wraz z dostępem do szkoleń i rozwoju