Senior Data Engineer - K/M

Astek Group; Kraków; Hybrid; PLN 240,000 - 360,000; Full time

Benefits offered by this job

Hybrid work Kraków

Job summary

ASTEK Polska w Krakowie poszukuje Senior Data Engineera do projektu modernizacji platform danych w sektorze BFSI. Będziesz tworzył i rozwijał usługi oparte o FastAPI oraz budował ETL/ELT z Databricks i PySpark. Migracja do Unity Catalog i strumieniowe przetwarzanie danych to kluczowe zadania.

Wymagane min. 7 lat doświadczenia, samodzielność i umiejętność współpracy z biznesem. Model pracy to hybryda 3 dni w tygodniu w biurze w Krakowie; na B2B brak etatu, płatny urlop i chorobowe.

Qualifications

• Co najmniej 7 lat doświadczenia w Data Engineering i programowaniu w Pythonie.
• Praktyczne doświadczenie w tworzeniu i rozwijaniu API z FastAPI.
• Dobra znajomość Databricks, PySpark, SQL i Delta Lake.
• Doświadczenie w migracjach do Unity Catalog.
• Doświadczenie z Databricks Structured Streaming i przetwarzaniem danych w czasie rzeczywistym.
• Doświadczenie z bazami Oracle i SQL Server oraz Informatica.
• Znajomość sektora BFSI.
• Praca hybrydowa – 3 dni w tygodniu z biura w Krakowie.

Skills

Python

Data Engineering

Tools

Databricks

PySpark

SQL

Delta Lake

Unity Catalog

FastAPI

Informatica

Oracle

SQL Server

Databricks Structured Streaming

Job description

ASTEK Polska szuka Senior Data Engineera do projektu modernizacji platform danych w sektorze BFSI. Będziesz tworzyć i rozwijać usługi oraz integracje oparte o FastAPI, budować skalowalne procesy ETL/ELT z Databricks i PySpark, prowadzić migracje do Unity Catalog oraz wdrażać rozwiązania do przetwarzania strumieniowego. Praca obejmuje też współpracę z zespołami biznesowymi i technologicznymi przy rozwiązaniach klasy enterprise. To oferta dla samodzielnego inżyniera z min. 7-letnim doświadczeniem, który potrafi projektować i wdrażać rozwiązania bez wsparcia zespołu. Uwaga: model pracy to 3 dni w tygodniu z biura w Krakowie, a współpraca na B2B oznacza brak etatu, płatnego urlopu i chorobowego.

• minimum 7 lat doświadczenia w Data Engineering oraz programowaniu w Pythonie
• praktyczne doświadczenie w tworzeniu i rozwijaniu API z wykorzystaniem FastAPI
• bardzo dobra znajomość Databricks, PySpark, SQL oraz Delta Lake
• doświadczenie w migracjach do Unity Catalog
• doświadczenie z Databricks Structured Streaming i przetwarzaniem danych w czasie rzeczywistym
• doświadczenie z bazami Oracle i SQL Server oraz narzędziem Informatica
• znajomość specyfiki sektora Banking, Financial Services & Insurance (BFSI)
• praca hybrydowa — 3 dni w tygodniu z biura w Krakowie