Senior Data Engineer

Autenti; Warszawa; Hybrid; PLN 480,000 - 720,000; Full time

Benefits offered by this job

Zdalna współpraca

Elastyczne godziny pracy

Job summary

Autenti poszukuje doświadczonego specjalisty ds. danych do zbudowania i utrzymania nowoczesnej platformy danych. Do obowiązków należy migracja danych, modelowanie hurtowni i implementacja warstwy BI na potrzeby raportowania i analityki.

Praca zdalna z elastycznymi godzinami, współpraca B2B i bliska kooperacja z zespołami finansów, produktu i IT. Wymagane co najmniej 6 lat doświadczenia i biegła znajomość SQL oraz narzędzi danych w chmurze.

Qualifications

• Minimum 6 lat doświadczenia w inżynierii danych i migracjach produkcyjnych.
• Ekspercka znajomość SQL i projektowania schematów danych w chmurze.
• Doświadczenie w Pythonie oraz orkiestracji procesów (Airflow, Dagster).

Responsibilities

• Zbudowanie i utrzymanie pipeline’ów danych do raportowania i analityki.
• Projektowanie hurtowni danych, optymalizacja kosztów i wydajności.
• Uruchomienie CDC i replikacji danych z produkcji/streamingu.
• Wdrożenie testów, monitoringu i alertów jakości danych.
• Budowa warstwy semantycznej i słowników metryk, dashboardy.

Skills

SQL

Cloud DW

Python

Airflow

Dagster

Data Modeling

Git & CI/CD

Education

Bachelor’s or higher in a relevant field

Tools

dbt

Dataform

Git

Airflow

Job description

O nas

Autenti to europejska platforma usług zaufania, która łączy ludzi i firmy w przestrzeni cyfrowej, zapewniając szybkość, wygodę i bezpieczeństwo. Wspieramy firmy w zarządzaniu dokumentami - od e-podpisów (Autenti eSign), przez weryfikację tożsamości (Autenti eID), po e-doręczenia i archiwizację (Autenti eDelivery, Autenti eDocument). Z naszych rozwiązań korzystają tysiące organizacji w całej Europie, w tym firmy z wymagających sektorów, takich jak bankowość czy ochrona zdrowia.

W Autenti wierzymy, że najlepsze rozwiązania powstają, kiedy działamy razem. Stawiamy na zaufanie, współpracę i szacunek, i staramy się tworzyć środowisko, w którym każdy głos ma znaczenie. Jednocześnie bezpieczeństwo i zgodność stanowią fundament naszych działań. Działając w oparciu o sprawdzone standardy i stale doskonaląc nasze praktyki, tworzymy rozwiązania, na których mogą polegać nasi klienci.

Kogo szukamy?

Szukamy osoby, która pomoże nam zbudować platformę danych - od pobierania danych z systemów źródłowych, przez hurtownię i spójne metryki, po BI i modele analityczne. Szukamy kogoś, kto lubi zarówno projektować rozwiązania, jak i samodzielnie je wdrażać, a za dobry efekt uznaje sprawnie działający system.

Dobrze odnajdziesz się w tym projekcie, jeśli masz za sobą migrację do chmury i wiesz, co dzieje się z platformą po jej uruchomieniu. Szczególnie docenimy doświadczenie z firm produktowych, SaaS, e-commerce, mediów lub telco, w których odpowiadał_ś za platformę i pracę z danymi na większą skalę.

Zakres projektu

• Zbudowanie i utrzymanie pipeline’ów danych - pozyskiwanie, orkiestracja, transformacja i udostępnianie danych na potrzeby raportowania oraz analityki.
• Zaprojektowanie i wdrożenie hurtowni danych - modelowanie struktur oraz dobór rozwiązań zapewniających wydajność, skalowalność i kontrolę kosztów.
• Uruchomienie replikacji CDC z bazy produkcyjnej i/lub streamingu danych - wraz z określeniem zakresu replikacji i doborem architektury.
• Zapewnienie jakości i niezawodności danych - wdrożenie testów, monitoringu i alertów, które pozwolą wykrywać awarie zasilania, zanim zauważą je odbiorcy raportów.
• Budowa warstwy semantycznej, agregatów i słowników - wspólne definicje metryk oraz dashboardy korzystające bezpośrednio z modelu danych.
• Wdrożenie warstwy BI i produkcyjne uruchomienie modeli analitycznych - m.in. przewidywania churnu, LTV i konwersji oraz segmentacji klientów.

Czego oczekujemy?

• Minimum 6 lat doświadczenia w inżynierii danych, w tym co najmniej jednej migracji zakończonej wdrożeniem produkcyjnym. Atutem będzie znajomość kilku generacji technologii danych oraz odpowiedzialność za platformę po jej uruchomieniu.
• Eksperckiej znajomości SQL i chmurowych hurtowni danych- projektowania schematów, analizy planów wykonania, optymalizacji zapytań, partycjonowania, klastrowania i kontroli kosztów.
• Umiejętności tworzenia produkcyjnego kodu w Pythonie i orkiestracji procesów z wykorzystaniem Airflow, Dagster, Workflows lub podobnych narzędzi, a także znajomości mechaniki CDC i replikacji logicznej.
• Dobrych praktyk inżynierskich- transformacji w wersjonowanym SQL (dbt lub Dataform), testów i dokumentacji w repozytorium, codziennej pracy z Git i CI/CD oraz przeglądów kodu.
  Praktycznej znajomości bezpieczeństwa danych - zarządzania sekretami, tożsamościami usług i dostępem opartym na rolach. Dodatkowym atutem będzie doświadczenie z pipeline’ami wykorzystującymi modele językowe do klasyfikacji, wzbogacania danych lub wyszukiwania wektorowego.
• Samodzielności od wymagań do wdrożenia - umiejętności przekładania potrzeb finansów, produktu i IT na rozwiązania techniczne oraz podejmowania i wdrażania decyzji bez bieżącego nadzoru technicznego.

Jak będzie wyglądać współpraca i co oferujemy?

• Projektową współpracę B2B, opartą na uzgodnionym zakresie, etapach i rezultatach.
• Samodzielność techniczną i wpływ na architekturę — od wyboru podejścia po jego wdrożenie i uruchomienie produkcyjne.
• Bezpośrednią współpracę z finansami, produktem i IT, aby rozwiązania odpowiadały na konkretne potrzeby biznesowe.
• Nasz sprzęt i oprogramowanie niezbędne do realizacji projektu.
• Zdalną współpracę i elastyczne godziny — samodzielnie organizujesz swój czas, uwzględniając uzgodnione terminy i spotkania projektowe.

Chcesz porozmawiać o projekcie? Prześlij CV i krótko opisz migrację, którą przeprowadził_ś albo platformę danych, za której wdrożenie i działanie odpowiadałe_ś.