ETL Developer (K/M)

ALIOR BANK; Województwo mazowieckie; Hybrid; PLN 180,000 - 240,000; Full time

Benefits offered by this job

Kafeteria

Private medical care with dental

Multisport card

Insurance

Internal contests

Discount programs

Volunteer day

Job summary

Alior Bank SA zaprasza do zespołu odpowiedzialnego za CRM i Marketing Automation oraz platformę danych. Praca obejmuje projektowanie i utrzymanie widoków i struktur danych w hurtowni danych oraz zasileń ETL i Real-Time. Do Twoich zadań należeć będzie monitorowanie pipeline’ów, utrzymanie jakości danych, rozwijanie DataOps oraz CI/CD.

Współpraca z zespołami źródeł danych i biznesem w środowisku zorientowanym na klienta. Wymagania: min.

Qualifications

• Minimum 3 lata udokumentowanego doświadczenia na podobnym stanowisku.
• Doświadczenie z rozwiązaniami ETL.
• Dobra znajomość SQL i doświadczenie z bazami danych.
• Doświadczenie w projektowaniu i optymalizacji struktur danych oraz wydajności zapytań.
• Znajomość usług Microsoft Azure, szczególnie storage, integracją i przetwarzaniem danych.
• Doświadczenie z Azure Data Factory (ADF).
• Doświadczenie w przetwarzaniu dużych zbiorów danych, np. Spark lub Azure Databricks.
• Znajomość Apache Kafka i architektury event-driven.
• Umiejętność diagnozowania problemów związanych z topicami, consumerami, producerami, partycjami.
• Znajomość różnic między batch, near Real-Time i Real-Time.
• Doświadczenie w optymalizacji i automatyzacji przepływów danych.
• Umiejętność monitorowania procesów danych, analizowania logów.
• Doświadczenie z DevOps i CI/CD wspieraniem wdrażania zmian.
• Biegła obsługa Git.
• Wykorzystanie Generative AI / AI Copilot w codziennej pracy inżynierskiej.
• Dobra komunikacja i samodzielność; praca w Scrum.
• Współpraca z obszarem CRM i analizą danych.
• Znajomość języka angielskiego min. B2.
• Umowa o pracę, praca hybrydowa.

Responsibilities

• Projektowanie, tworzenie i utrzymanie widoków oraz struktur danych w hurtowni danych, wykorzystywanych przez procesy integracyjne.
• Projektowaniu, budowie i utrzymaniu procesów ETL, w tym optymalizacji ich wydajności, zapytań oraz przepływów danych.
• Rozwoju i utrzymaniu zasileń batch, obejmujących przepływ danych: Hurtownia Danych (Teradata) → Azure Data Factory → rozwiązania Adobe.
• Rozwoju i utrzymaniu zasileń oraz integracji Real-Time, wykorzystujących: Kafka → Azure Event Hubs → Adobe Accelerator / rozwiązania Adobe.
• Konfiguracji, obsłudze i diagnostyce integracji opartych o Apache Kafka, w tym pracy z topicami, producerami, consumerami, partycjami i przepływem komunikatów.
• Współpracy z zespołami źródłowymi przy identyfikowaniu i uruchamianiu nowych źródeł oraz strumieni danych.
• Monitorowaniu działania pipeline'ów i przepływów danych oraz analizie błędów, opóźnień i problemów wydajnościowych.
• Rozwijaniu i wdrażaniu standardów DataOps.
• Zapewnianiu jakości, kompletności, spójności i bezpieczeństwa przetwarzanych danych.
• Wspieraniu testów wydajnościowych dla integracji i danych Real-Time.
• Wsparciu produkcyjnym oraz diagnozowaniu problemów end-to-end, od źródła danych, przez warstwę integracyjną, aż do systemu docelowego.
• Rozwijaniu automatyzacji CI/CD dla procesów danych i ETL.
• Tworzeniu i utrzymywaniu dokumentacji procesów, przepływów oraz rozwiązań.
• Pracy w zwinnym zespole z elementami Scrum.

Skills

SQL

Data Modeling

ETL Development

Git

DevOps practices

Education

University degree in Computer Science or related field

Tools

Azure Data Factory

Kafka

Azure Databricks

Teradata

Adobe Solutions

Spark

Azure SQL

Job description

Bank realizuje transformację obszaru CRM i Marketing Automation w oparciu o nowoczesny ekosystem systemów informatycznych oraz komunikację omnichannel.W ramach transformacji rozwijana jest platforma Next Generation CRM, wykorzystująca nowoczesne rozwiązania klasy Campaign Management, technologie Microsoft Azure oraz środowisko hurtowni danych.

Dołączając do naszego zespołu, będziesz odpowiadać za rozwój standardów w zakresie spójności i jakości procesów ETL oraz danych, ze szczególnym uwzględnieniem utrzymania i monitorowania systemów przetwarzania danych.

Mamy dla Ciebie pracę, która polega na:

• projektowaniu, tworzeniu i utrzymywaniu widoków oraz struktur danych w hurtowni danych, wykorzystywanych przez procesy integracyjne,
• projektowaniu, budowie i utrzymywaniu procesów ETL, w tym optymalizacji ich wydajności, zapytań oraz przepływów danych,
• rozwoju i utrzymaniu zasileń batch, obejmujących przepływ danych: Hurtownia Danych (Teradata) → Azure Data Factory → rozwiązania Adobe,
• rozwoju i utrzymaniu zasileń oraz integracji Real-Time, wykorzystujących: Kafka → Azure Event Hubs → Adobe Accelerator / rozwiązania Adobe,
• konfiguracji, obsłudze i diagnostyce integracji opartych o Apache Kafka, w tym pracy z topicami, producerami, consumerami, partycjami i przepływem komunikatów,
• współpracy z zespołami źródłowymi przy identyfikowaniu i uruchamianiu nowych źródeł oraz strumieni danych,
• monitorowaniu działania pipeline'ów i przepływów danych oraz analizie błędów, opóźnień i problemów wydajnościowych,
• rozwijaniu i wdrażaniu standardów DataOps,
• zapewnianiu jakości, kompletności, spójności i bezpieczeństwa przetwarzanych danych,
• wspieraniu testów wydajnościowych dla integracji i danych Real-Time,
• wsparciu produkcyjnym oraz diagnozowaniu problemów end-to-end, od źródła danych, przez warstwę integracyjną, aż do systemu docelowego,
• rozwijaniu automatyzacji CI/CD dla procesów danych i ETL,
• tworzeniu i utrzymywaniu dokumentacji procesów, przepływów oraz rozwiązań,
• pracy w zwinnym zespole z elementami Scrum.

Jeśli jesteś osobą, która:

• ma minimum 3 lata udokumentowanego doświadczenia na podobnym stanowisku,
• ma praktyczne doświadczenie w pracy z rozwiązaniami klasy ETL,
• dobrze lub bardzo dobrze zna SQL i ma doświadczenie w pracy z bazami danych,
• ma doświadczenie w projektowaniu i optymalizacji struktur danych oraz wydajności zapytań,
• zna usługi Microsoft Azure, szczególnie związane ze składowaniem, integracją i przetwarzaniem danych,
• ma praktyczne doświadczenie z Azure Data Factory (ADF),
• ma doświadczenie w przetwarzaniu dużych zbiorów danych, np. z wykorzystaniem Apache Spark lub Azure Databricks,
• zna Apache Kafka i rozumie sposób działania architektury event-driven oraz komunikacji producer/consumer,
• potrafi diagnozować problemy dotyczące topiców, consumerów, producerów, partycji oraz przetwarzania komunikatów,
• rozumie różnice pomiędzy przetwarzaniem batch, near Real-Time i Real-Time,
• ma doświadczenie w optymalizacji i automatyzacji przepływów danych,
• potrafi monitorować procesy danych, analizować logi i samodzielnie diagnozować problemy,
• ma doświadczenie z praktykami DevOps i CI/CD wspierającymi wdrażanie zmian w procesach danych,
• sprawnie korzysta z Git,
• praktycznie wykorzystuje Generative AI / AI Copilot w codziennej pracy inżynierskiej, w szczególności do tworzenia, analizy i optymalizacji SQL, skryptów, transformacji danych i konfiguracji pipeline'ów, a także do analizy logów, diagnostyki błędów oraz identyfikowania przyczyn problemów w przepływach ETL, Kafka i Real-Time,
• ma doświadczenie w pracy w zwinnym zespole z elementami Scrum,
• potrafi tworzyć i utrzymywać dokumentację techniczną,
• jest osobą samodzielną i komunikatywną oraz potrafi efektywnie współpracować zarówno z osobami technicznymi, jak i biznesowymi,
• ma doświadczenie we współpracy z obszarem CRM oraz w analizie i rozwiązywaniu problemów związanych z przetwarzaniem danych,
• zna język angielski na poziomie minimum B2.
• umowę o pracę,
• pracę hybrydową,
• pakiet benefitów m.in. kafeteria, prywatna opieka medyczna z pakietem stomatologicznym, karta Multisport, ubezpieczenie, konkursy wewnętrzne, programy zniżkowe i lojalnościowe, 16 godzin na wolontariat "Dzień na U",
• pracę w oparciu o wartości wspólnie wypracowane przez Aliorowców – odpowiedzialność, otwartość, innowacyjność, zorientowanie na klienta,
• Alior Uniwersytet – przestrzeń do rozwoju kompetencji zawodowych oraz personalnych,
• nagrodę pieniężną za skuteczne polecenie w ramach Programu Poleceń.