Azure Databricks Data Engineer — Hybrid/Remote, Flexible Hours

Onwelo; Poland; Hybrid; PLN 133,920 - 200,880; Full time

Benefits offered by this job

Elastyczne godziny pracy

Praca w trybie hybrydowym lub zdalnym

Dodatkowe ubezpieczenie na życie

Prywatna opieka medyczna

Karta MultiSport Plus

Szkolenia wewnętrzne

Job summary

Nowoczesna firma technologiczna w Polsce poszukuje Data Engineera do pracy z Azure Databricks. Osoba na tym stanowisku będzie odpowiedzialna za projektowanie i rozwijanie pipeline’ów danych oraz migrację procesów do chmury. Idealny kandydat ma doświadczenie z Apache Spark oraz znajomość Pythona. Praca w trybie hybrydowym lub zdalnym z elastycznymi godzinami pracy oraz dostępem do szkoleń.

Qualifications

• Komercyjne doświadczenie w pracy z Azure Databricks i Apache Spark.
• Znajomość PySpark i SQL.
• Zaawansowana znajomość Pythona, w tym OOP.
• Zgodność z najlepszymi praktykami w Data Engineering.
• Zrozumienie zagadnień data lake i lakehouse.
• Umiejętność współpracy w środowisku projektowym.

Responsibilities

• Projektowanie i rozwój pipeline’ów danych w Azure Databricks.
• Pisz wydajny i testowalny kod w Pythonie.
• Analiza istniejących procesów danych i projektowanie architektury.
• Migracja procesów do architektury data lake / lakehouse.
• Optymalizacja wydajności i kosztów rozwiązań chmurowych.
• Współpraca z zespołami klienta oraz Onwelo.

Skills

Doświadczenie z Azure Databricks

Praca z PySpark

Znajomość SQL

Programowanie w Pythonie

Znajomości o OOP

Praktyki Data Engineering

Komunikacja w języku angielskim

Tools

Apache Spark

Azure

Job description

Nowoczesna firma technologiczna w Polsce poszukuje Data Engineera do pracy z Azure Databricks. Osoba na tym stanowisku będzie odpowiedzialna za projektowanie i rozwijanie pipeline’ów danych oraz migrację procesów do chmury. Idealny kandydat ma doświadczenie z Apache Spark oraz znajomość Pythona. Praca w trybie hybrydowym lub zdalnym z elastycznymi godzinami pracy oraz dostępem do szkoleń.