ETL Developer (K/M)

ALIOR BANK; Kraków; Hybrid; PLN 180,000 - 260,000; Full time

Benefits offered by this job

Kafeteria

Prywatna opieka medyczna z pakietem St

Karta Multisport

Ubezpieczenie

Konkursy wewnętrzne

Programy zniżkowe i lojalnościowe

16 godzin na wolontariat

Job summary

Alior Bank SA poszukuje specjalisty ds. hurtowni danych i integracji danych. Pracownik będzie projektował i utrzymywał widoki danych, procesy ETL oraz zasilenia batch i Real-Time przy użyciu Teradata, Azure Data Factory, Kafka i Spark.

Benfits obejmują pracę hybrydową, pakiet benefitów i możliwość rozwoju w środowisku cyfrowej transformacji. Wymagane jest minimum 3 lata doświadczenia i znajomość angielskiego na poziomie B2.

Qualifications

• Minimum 3 lata udokumentowanego doświadczenia na podobnym stanowisku.
• “Praktyczne doświadczenie w pracy z rozwiązaniami klasy ETL.”
• “Dobra lub bardzo dobra znajomość SQL i doświadczenie z bazami danych.”
• “Doświadczenie w projektowaniu i optymalizacji struktur danych oraz wydajności zapytań.”
• “Znajomość usług Microsoft Azure związanych ze składowaniem, integracją i przetwarzaniem danych.”
• “Doświadczenie z Azure Data Factory (ADF).
• “Doświadczenie w przetwarzaniu dużych zbiorów danych (np. Apache Spark, Azure Databricks).
• “Znajomość Apache Kafka i architektury event-driven.”
• “Umiejętność monitorowania procesów danych i diagnozowania problemów.”
• “Doświadczenie z DevOps i CI/CD wspierającymi wdrażanie zmian.”
• “Umiejętność pracy z Git oraz dokumentacją techniczną.”
• “Znajomość narzędzi AI Copilot do analizy i optymalizacji SQL.”

Responsibilities

• Projektowanie, tworzenie i utrzymanie widoków i struktur danych w hurtowni danych.
• Projektowanie i utrzymanie procesów ETL, optymalizacja wydajności i przepływów danych.
• Rozwój i utrzymanie zasileń batch (Teradata → Azure Data Factory → Adobe).
• Rozwój i utrzymanie zasileń Real-Time (Kafka → Azure Event Hubs → Adobe).
• Konfiguracja i diagnostyka integracji opartych o Apache Kafka (topic, producers, consumers).
• Współpraca z zespołami źródłowymi przy identyfikowaniu nowych źródeł danych.
• Monitorowanie pipeline’ów, analiza błędów i problemów wydajnościowych.
• Rozwijanie standardów DataOps, zapewnienie jakości i bezpieczeństwa danych.
• Wspieranie testów wydajnościowych dla integracji i danych Real-Time.
• Wsparcie produkcyjne i diagnoza end-to-end od źródła do systemu docelowego.
• Rozwijanie automatyzacji CI/CD dla procesów danych i ETL.
• Tworzenie i utrzymywanie dokumentacji procesów i przepływów.
• Praca w zespole scrumowym.

Skills

SQL

Git

Data modeling

ETL

Real-Time processing

Tools

Azure Data Factory

Apache Kafka

Apache Spark

Teradata

Azure Event Hubs

Job description

Bank realizuje transformację obszaru CRM i Marketing Automation w oparciu o nowoczesny ekosystem systemów informatycznych oraz komunikację omnichannel.W ramach transformacji rozwijana jest platforma Next Generation CRM, wykorzystująca nowoczesne rozwiązania klasy Campaign Management, technologie Microsoft Azure oraz środowisko hurtowni danych.

Dołączając do naszego zespołu, będziesz odpowiadać za rozwój standardów w zakresie spójności i jakości procesów ETL oraz danych, ze szczególnym uwzględnieniem utrzymania i monitorowania systemów przetwarzania danych.

Mamy dla Ciebie pracę, która polega na:

• projektowaniu, tworzeniu i utrzymywaniu widoków oraz struktur danych w hurtowni danych, wykorzystywanych przez procesy integracyjne,
• projektowaniu, budowie i utrzymywaniu procesów ETL, w tym optymalizacji ich wydajności, zapytań oraz przepływów danych,
• rozwoju i utrzymaniu zasileń batch, obejmujących przepływ danych: Hurtownia Danych (Teradata) → Azure Data Factory → rozwiązania Adobe,
• rozwoju i utrzymaniu zasileń oraz integracji Real-Time, wykorzystujących: Kafka → Azure Event Hubs → Adobe Accelerator / rozwiązania Adobe,
• konfiguracji, obsłudze i diagnostyce integracji opartych o Apache Kafka, w tym pracy z topicami, producerami, consumerami, partycjami i przepływem komunikatów,
• współpracy z zespołami źródłowymi przy identyfikowaniu i uruchamianiu nowych źródeł oraz strumieni danych,
• monitorowaniu działania pipeline'ów i przepływów danych oraz analizie błędów, opóźnień i problemów wydajnościowych,
• rozwijaniu i wdrażaniu standardów DataOps,
• zapewnianiu jakości, kompletności, spójności i bezpieczeństwa przetwarzanych danych,
• wspieraniu testów wydajnościowych dla integracji i danych Real-Time,
• wsparciu produkcyjnym oraz diagnozowaniu problemów end-to-end, od źródła danych, przez warstwę integracyjną, aż do systemu docelowego,
• rozwijaniu automatyzacji CI/CD dla procesów danych i ETL,
• tworzeniu i utrzymywaniu dokumentacji procesów, przepływów oraz rozwiązań,
• pracy w zwinnym zespole z elementami Scrum.

Jeśli jesteś osobą, która:

• ma minimum 3 lata udokumentowanego doświadczenia na podobnym stanowisku,
• ma praktyczne doświadczenie w pracy z rozwiązaniami klasy ETL,
• dobrze lub bardzo dobrze zna SQL i ma doświadczenie w pracy z bazami danych,
• ma doświadczenie w projektowaniu i optymalizacji struktur danych oraz wydajności zapytań,
• zna usługi Microsoft Azure, szczególnie związane ze składowaniem, integracją i przetwarzaniem danych,
• ma praktyczne doświadczenie z Azure Data Factory (ADF),
• ma doświadczenie w przetwarzaniu dużych zbiorów danych, np. z wykorzystaniem Apache Spark lub Azure Databricks,
• zna Apache Kafka i rozumie sposób działania architektury event-driven oraz komunikacji producer/consumer,
• potrafi diagnozować problemy dotyczące topiców, consumerów, producerów, partycji oraz przetwarzania komunikatów,
• rozumie różnice pomiędzy przetwarzaniem batch, near Real-Time i Real-Time,
• ma doświadczenie w optymalizacji i automatyzacji przepływów danych,
• potrafi monitorować procesy danych, analizować logi i samodzielnie diagnozować problemy,
• ma doświadczenie z praktykami DevOps i CI/CD wspierającymi wdrażanie zmian w procesach danych,
• sprawnie korzysta z Git,
• praktycznie wykorzystuje Generative AI / AI Copilot w codziennej pracy inżynierskiej, w szczególności do tworzenia, analizy i optymalizacji SQL, skryptów, transformacji danych i konfiguracji pipeline'ów, a także do analizy logów, diagnostyki błędów oraz identyfikowania przyczyn problemów w przepływach ETL, Kafka i Real-Time,
• ma doświadczenie w pracy w zwinnym zespole z elementami Scrum,
• potrafi tworzyć i utrzymywać dokumentację techniczną,
• jest osobą samodzielną i komunikatywną oraz potrafi efektywnie współpracować zarówno z osobami technicznymi, jak i biznesowymi,
• ma doświadczenie we współpracy z obszarem CRM oraz w analizie i rozwiązywaniu problemów związanych z przetwarzaniem danych,
• zna język angielski na poziomie minimum B2.
• umowę o pracę,
• pracę hybrydową,
• pakiet benefitów m.in. kafeteria, prywatna opieka medyczna z pakietem stomatologicznym, karta Multisport, ubezpieczenie, konkursy wewnętrzne, programy zniżkowe i lojalnościowe, 16 godzin na wolontariat "Dzień na U",
• pracę w oparciu o wartości wspólnie wypracowane przez Aliorowców – odpowiedzialność, otwartość, innowacyjność, zorientowanie na klienta,
• Alior Uniwersytet – przestrzeń do rozwoju kompetencji zawodowych oraz personalnych,
• nagrodę pieniężną za skuteczne polecenie w ramach Programu Poleceń.