Senior Data Engineer (Python / Azure)

DCG; Warszawa; On-site; PLN 180,000 - 240,000; Full time

Job summary

DCG szuka Senior Data Engineera do projektu, w którym od podstaw zaprojektujesz hurtownię danych lub lakehouse. Będziesz tworzyć warstwy bronze/silver/gold i produkcyjne pipeline'y ETL/ELT w Pythonie, integrując dane z źródeł regulacyjnych i parlamentarnych.

Wymagane min. 5 lat doświadczenia w data engineeringu, praktyczna znajomość modelowania wymiarowego i architektury medallion oraz umiejętność pracy z klientem po stronie technicznej. Angielski min. B2+.

Qualifications

• Minimum 5 lat komercyjnego doświadczenia w data engineeringu.
• Doświadczenie w zaprojektowaniu i zbudowaniu hurtowni danych lub lakehouse.
• Praktyczna znajomość modelowania wymiarowego, star schema i architektury medallion.
• Umiejętność przełożenia taksonomii biznesowej na struktury danych oraz oceny jej kompletności i spójności.
• Doświadczenie w integracjach REST API (autoryzacja, paginacja, limity zapytań, retry, parsowanie JSON/XML).
• Doświadczenie w dokumentowaniu rozwiązań i przekazywaniu ich do utrzymania innemu zespołowi.
• Angielski min. B2+ oraz samodzielność w bezpośredniej współpracy z klientem.

Skills

Data modeling

Dimensional modeling

ETL/ELT development

REST API integration

Client communication

Documentation

English proficiency

Tools

Python

Job description

DCG szuka Senior Data Engineera do projektu, w którym od podstaw zaprojektujesz hurtownię danych lub lakehouse dla klienta. Będziesz budować warstwy bronze/silver/gold w architekturze medallion, model wymiarowy (star schema) oraz produkcyjne pipeline'y ETL/ELT w Pythonie, integrując dane ze źródeł regulacyjnych i parlamentarnych. To oferta — dla samodzielnego inżyniera danych, który potrafi przełożyć taksonomię biznesową klienta na model danych i bezpośrednio współpracować z klientem przy decyzjach technicznych.

• min. 5lat komercyjnego doświadczenia w data engineeringu;
• doświadczenie w zaprojektowaniu i zbudowaniu od podstaw hurtowni danych lub lakehouse;
• praktyczna znajomość modelowania wymiarowego, star schema i architektury medallion;
• umiejętność przełożenia taksonomii biznesowej na struktury danych oraz oceny jej kompletności i spójności;
• doświadczenie w integracjach RESTAPI(autoryzacja, paginacja, limity zapytań, retry, parsowanie JSON/XML);
• doświadczenie w dokumentowaniu rozwiązań i przekazywaniu ich do utrzymania innemu zespołowi;
• angielski min. B2+ oraz samodzielność wbezpośredniej współpracyz klientem