Starszy Inżynier Danych | FastAPI & Databricks

Astek; Kraków; Hybrid; PLN 221,000 - 244,000; Full time

Benefits offered by this job

Multisport

Private medical care

Życiowe ubezpieczenie

Job summary

Astek poszukuje Starszego Inżyniera Danych – K/M do zespołu w Krakowie. Praca w modelu hybrydowym: 3 dni w biurze, B2B.

Kandydat z minimum 7-letnim doświadczeniem będzie projektował i wdrażał nowoczesne rozwiązania data engineeringowe, rozwijał usługi oparte na FastAPI oraz inicjatywy związane z modernizacją platformy danych. Wymagane jest biegłe Python, Databricks, PySpark, SQL i Delta Lake, z doświadczeniem w migracjach do Unity Catalog oraz pracy z Databricks Streaming.

Qualifications

• Minimum 7 lat doświadczenia w Data Engineering i programowaniu w Pythonie.
• Doświadczenie w tworzeniu i rozwijaniu API z FastAPI.
• Dobra znajomość Databricks, PySpark, SQL oraz Delta Lake.

Responsibilities

• Tworzenie i rozwijanie usług opartych o FastAPI.
• Budowanie skalowalnych procesów ETL/ELT z Databricks i PySpark.
• Migracje do Unity Catalog i modernizacja platform danych.
• Wdrażanie rozwiązań do przetwarzania danych w czasie rzeczywistym.
• Współpraca z zespołami biznesowymi i technicznymi w środowisku enterprise.
• Projektowanie i implementacja rozwiązań data engineeringowych odpowiednich dla organizacji.

Skills

Data Engineering

Python

FastAPI

Databricks

PySpark

SQL

Delta Lake

Unity Catalog

Oracle

Informatica

Tools

Databricks

Unity Catalog

Azure

Git/GitLab/Azure DevOps

Job description

Astek poszukuje Starszego Inżyniera Danych – K/M do zespołu w Krakowie. Praca w modelu hybrydowym: 3 dni w biurze, B2B.

Kandydat z minimum 7-letnim doświadczeniem będzie projektował i wdrażał nowoczesne rozwiązania data engineeringowe, rozwijał usługi oparte na FastAPI oraz inicjatywy związane z modernizacją platformy danych. Wymagane jest biegłe Python, Databricks, PySpark, SQL i Delta Lake, z doświadczeniem w migracjach do Unity Catalog oraz pracy z Databricks Streaming.