Data Engineer (Python/SQL)

Verita HR; Kraków; Hybrid; PLN 180,000 - 240,000; Full time

Job summary

Verita HR Group w Krakowie poszukuje doświadczonego Data Engineera, który dostarczy production-grade modele danych i pipeline'y dla jednego z największych banków. Szukamy osoby z mocnymi umiejętnościami SQL i Python, specjalisty od katalogów, metadanych i data governance.

Planowane projekty są hybrydowe, z możliwością rotacji między zadaniami i rozwojem kompetencji w obszarach jakości danych, API i chmury. Dołączysz do zespołu inżynierów, analityków i architektów.

Qualifications

• Wymagane doświadczenie jako Data Engineer dostarczanie production-grade modeli danych i pipeline'ów.
• Silne umiejętności SQL i Python.
• Doświadczenie projektowania modeli danych dla katalogów, metadanych, zarządzania danymi.
• Dobra znajomość jakości danych, genealogii, pochodzenia, własności i kontroli dostępu.
• Doświadczenie integracji danych przez API, bazy danych, strumienie zdarzeń lub platformy chmury.
• Dobre umiejętności komunikacyjne i współpraca z zespołami produktowymi, architekturą i inżynierią.

Responsibilities

• Projektuj i buduj model katalogu danych obejmujący domeny, pod-domeny, właścicieli danych, projekty, źródła, status i cykl życia
• Twórz niezawodne potoki danych do pobierania, transformacji, wzbogacania i utrzymania danych katalogu z wewnętrznych źródeł
• Integruj dane katalogowe z metadanymi, ontologią, jakością danych, wyszukiwaniem i usługami odzyskiwania
• Wdrażaj kontrole jakości danych, pochodzenia, pochodzenia i dostępu oraz cyklu życia
• Umożliwiaj przeglądanie, semantyczne odkrywanie, informację zwrotną i insighty dotyczące zdrowia wiedzy
• Współpracuj z analitykami, stewardami danych, architektami i inżynierami w celu uzgodnienia wymagań danych i rozwiązania problemów jakości
• Wkład w API, testy, monitorowanie i dokumentację usług katalogowych danych

Skills

SQL

Python

Data modeling

Data pipelines

Data governance

APIs

Databases

Event streams

Cloud data platforms

Communication

Cross-functional collaboration

Tools

APIs

Databases

Event streams

Cloud data platforms

Job description

O projekcie:

• Prestigious position at one of the world’s largest banks
• Stable, long-term projects
• Competitive salary with a B2B contract
• Hybrid work (6 days per month from the office in Cracow)
• Private healthcare and multisport card
• Personal growth and development opportunities with the possibility to rotate between projects

Wymagania:

• Proven experience as a Data Engineer delivering production-grade data models and pipelines
• Strong SQL and Python skills, with experience processing structured and semi-structured data
• Experience designing data models for catalogues, metadata, data governance or enterprise platforms
• Good understanding of data quality, lineage, provenance, ownership and access controls
• Experience integrating data via APIs, databases, event streams or cloud data platforms
• Strong communication skills and experience working across product, architecture and engineering teams

Codzienne zadania:

• Design and build the catalogue data model covering domains, sub-domains, data owners, projects, sources, status and lifecycle
• Develop reliable pipelines to ingest, transform, enrich and maintain catalogue data from internal sources
• Integrate catalogue data with metadata, ontology, data quality, search and retrieval services
• Implement data quality, lineage, provenance, access and lifecycle controls
• Enable features such as browsing, semantic discovery, feedback and knowledge-health insights
• Work with analysts, data stewards, architects and engineers to agree data requirements and resolve ownership or quality issues
• Contribute to APIs, testing, monitoring and documentation for catalogue data services