Senior Data Engineer - Azure Databricks Pipelines (Remote)

Katowice IT; Katowice; Hybrid; PLN 240,000 - 420,000; Full time

Benefits offered by this job

Biura klasy A

Zdalna możliwość pracy

Prywatna opieka zdrowotna

Platforma kafeteryjna

Zniżki na samochody

Różnorodne projekty

Job summary

Sii Sp. z o.o. w Katowicach poszukuje doświadczonego Data Engineer, który dołączy do zespołu zajmującego się inżynierią danych w dynamicznym środowisku.

Będziesz projektować i utrzymywać potoki danych na Azure Databricks, definiować model danych i współpracować z Data Analytics, Data Science oraz Product w celu dostarczania kompleksowych rozwiązań. Wymagamy minimum 8 lat doświadczenia, znajomość Spark, Databricks, Snowflake, dbt i Pythona, a także angielski na poziomie C1; możliwość pracy

Qualifications

• Minimum 8-letnie doświadczenie w inżynierii danych.
• Biegła znajomość Apache Spark, Databricks, Snowflake, dbt i Pythona.
• Doświadczenie w projektowaniu rozwiązań opartych na Delta Lake / Iceberg / HDFS.
• Umiejętność prowadzenia złożonych projektów data engineering i mentoringu.

Responsibilities

• Projektowanie i rozwój zaawansowanych pipeline'ów danych w Azure Databricks.
• Tworzenie skalowalnej architektury danych w lakehouse.
• Definiowanie standardów i dobrych praktyk w Data Engineering.
• Współpraca z Data Analytics, Data Science i Product w celu dostarczania rozwiązań.
• Mentoring mniej doświadczonych inżynierów i wsparcie techniczne zespołu.
• Optymalizacja wydajności, bezpieczeństwa oraz kosztów funkcjonowania platformy danych.

Skills

Apache Spark

Databricks

Snowflake

dbt

Python

Tools

Delta Lake

Apache Iceberg

HDFS

Job description

Sii Sp. z o.o. w Katowicach poszukuje doświadczonego Data Engineer, który dołączy do zespołu zajmującego się inżynierią danych w dynamicznym środowisku.

Będziesz projektować i utrzymywać potoki danych na Azure Databricks, definiować model danych i współpracować z Data Analytics, Data Science oraz Product w celu dostarczania kompleksowych rozwiązań. Wymagamy minimum 8 lat doświadczenia, znajomość Spark, Databricks, Snowflake, dbt i Pythona, a także angielski na poziomie C1; możliwość pracy