Senior Data Engineer - Remote, Scalable Pipelines & Graphs

Antal; Polska; Hybrid; PLN 356,000 - 394,000; Full time

Benefits offered by this job

Elastyczne godziny pracy

Praca zdalna: Hybrydowo

Job summary

Antal poszukuje doświadczonego Inżyniera Danych (Data Engineer) w Polsce, pracującego nad rozwijaniem Enterprise Knowledge Platform w międzynarodowym środowisku bankowym. Rola obejmuje projektowanie pipeline’ów, grafowych baz danych i integrację z systemami analitycznymi.

Wymagane jest co najmniej 5 lat doświadczenia, dobra znajomość Pythona i SQL, a także praktyczne umiejętności z baz grafowych i narzędzi ETL/ELT. Praca hybrydowa, elastyczne godziny, zespół międzynarodowy.

Qualifications

• Minimum 5 lat doświadczenia komercyjnego jako Data Engineer lub Senior Data Engineer.
• Bardzo dobra znajomość Pythona i SQL.
• Doświadczenie z grafowymi bazami danych lub knowledge graphs (np. Neo4j, Neptune, JanusGraph).
• Doświadczenie w projektowaniu i rozwijaniu produkcyjnych pipeline’ów ETL/ELT.
• Dobra znajomość modelowania danych w relacyjnych i NoSQL bazach.
• Znajomość jakości danych, data lineage i ewolucji schematów.
• Doświadczenie ze środowiskami chmurowymi, orkiestracją danych i CI/CD.
• Samodzielne rozwiązywanie złożonych problemów technicznych, dobre umiejętności komunikacyjne i współpraca.

Responsibilities

• Projektowanie, rozwój i utrzymanie skalowalnych pipeline’ów do ingestowania, transformacji i przetwarzania danych.
• Projektowanie i optymalizacja modeli danych w relacyjnych, grafowych i NoSQL bazach; praca z knowledge graphs.
• Modelowanie encji i relacji oraz wydajne ładowanie i odpytywanie danych.
• Tworzenie reużywalnych komponentów przetwarzania danych i integracji ze źródłami oraz API.
• Wdrażanie jakości danych, walidacji, data lineage i provenance.
• Zapewnianie niezawodności i skalowalności pipeline’ów: przetwarzanie przyrostowe, obsługa błędów, ponawianie operacji i odzyskiwanie danych.
• Współpraca z architektami, inżynierami i biznesem przy przekładaniu wymagań na rozwiązania techniczne.
• Automatyzacja testów, CI/CD, monitorowanie i doskonalenie rozwiązań Data Engineering.

Skills

Python

SQL

Databases

NoSQL

ETL

Data Engineering

Tools

Neo4j

Amazon Neptune

JanusGraph

Job description

Antal poszukuje doświadczonego Inżyniera Danych (Data Engineer) w Polsce, pracującego nad rozwijaniem Enterprise Knowledge Platform w międzynarodowym środowisku bankowym. Rola obejmuje projektowanie pipeline’ów, grafowych baz danych i integrację z systemami analitycznymi.

Wymagane jest co najmniej 5 lat doświadczenia, dobra znajomość Pythona i SQL, a także praktyczne umiejętności z baz grafowych i narzędzi ETL/ELT. Praca hybrydowa, elastyczne godziny, zespół międzynarodowy.