Azure Data Engineer

Be in IT; Wrocław; Hybrid; PLN 165,000 - 207,000; Full time

Benefits offered by this job

Prywatna opieka medyczna

Karta Multisport

Nowoczesny sprzęt

Job summary

Be in IT poszukuje Azure Data Engineer do współpracy z międzynarodową firmą consultingową. Praca w modelu hybrydowym 2 dni w tygodniu, biura we Wrocławiu lub Poznaniu.

Wymagane 3 lata doświadczenia w ETL/ELT, Data Modelling oraz platformach chmurowych Azure. Znajomość Python, SQL i PySpark mile widziana.

Oferujemy stabilną współpracę, wynagrodzenie 120–150 PLN netto/godz. + VAT, wsparcie przy działalności gospodarczej i nowoczesny sprzęt.

Qualifications

• Minimum 3 lata doświadczenia w roli Data Engineer.
• Doświadczenie w dostarczaniu rozwiązań danych w środowisk Financial Services / Investment Banking.
• Silne zaplecze w integracji danych, transformacji i Data Modelling.
• Doświadczenia w pracy z cloud-based data platforms.

Responsibilities

• Projektowanie i utrzymywanie pipeline ETL/ELT dla danych strukturalnych i częściowo ustrukturyzowanych.
• Współpraca z Business Analysts, architektami, zespołami QA oraz Platform w celu przekształcania wymagań biznesowych w rozwiązania danych.
• Wdrażanie procesów data ingestion z wielu źródeł (bazy danych, API, pliki, messaging / event streams).
• Wspieranie środowisk produkcyjnych, analiza incydentów oraz optymalizacja wydajności (performance tuning).
• Zapewnienie zgodności ze standardami data governance, bezpieczeństwa oraz wymogami regulacyjnymi (compliance).

Skills

Python

SQL

PySpark

Databricks

Delta Lake

Azure

Data Factory

Synapse

REST API

CI/CD

Git

Azure DevOps

Data Modeling

Medallion

Lakehouse

Tools

Databricks

Azure Data Factory

Synapse

Delta Lake

Git

Azure DevOps

Job description

Be in IT to firma rekrutacyjna, wyspecjalizowana w poszukiwaniu Specjalistów z branży technologii informatycznych. Obecnie, dla naszego klienta, poszukujemy osoby na stanowisko Azure Data Engineer.

Zakres obowiązków:

• Długofalowa współpraca z międzynarodową, topową firmą consultingową, świadcząca usługi IT dla dużych i średnich firm z różnorodnych sektorów jak automotive, healthcare, finanse, bankowość czy produkcja.
• Współpraca z zespołem dostarczającym nowoczesne platformy danych i rozwiązania oparte na danych dla klientów z sektora Financial Services oraz Investment Banking.
• Projektowanie, rozwijanie i utrzymywanie pipeline ETL/ELT dla danych strukturalnych i częściowo ustrukturyzowanych.
• Budowa i optymalizacja rozwiązań typu data lakehouse wspierających obszary analityki, raportowania oraz potrzeby regulacyjne.
• Wdrażanie procesów data ingestion z wielu źródeł (bazy danych, API, pliki, messaging / event streams).
• Wykonywanie transformacji danych, walidacji i kontroli jakości w ramach end-to-end data flows.
• Współpraca z Business Analysts, architektami, zespołami QA oraz Platform w celu przekształcania wymagań biznesowych w rozwiązania danych.
• Wsparcie środowisk produkcyjnych, analiza incydentów oraz optymalizacja wydajności (performance tuning).
• Zapewnienie zgodności ze standardami data governance, bezpieczeństwa oraz wymogami regulacyjnymi (compliance).

Gotowości do pracy w modelu hybrydowym w wymiarze 2 dni w tygodniu z biura: Wrocław lub Poznań.

• Znajomości języka angielskiego na poziomie B2 lub C1 - umożliwiająca swobodną komunikację w międzynarodowym środowisku.
• Mile widziana jest dostępność ASAP, akceptowalny jest maksymalnie miesięczny okres wypowiedzenia, ze skutkiem na koniec miesiąca.

Oczekujemy:

• Minimum 3 lata doświadczenia zawodowego na stanowisku Data Engineer lub pokrewnym.
• Udokumentowanego doświadczenia w dostarczaniu rozwiązań danych w środowiskach Financial Services / Investment Banking.
• Silnego zaplecza w obszarach takich jak integracja danych, transformacja oraz Data Modelling.
• Doświadczenia w pracy z cloud-based data platforms.
• Biegłości w programowaniu i przetwarzaniu danych z użyciem technologii: Python, SQL, PySpark.
• Praktycznej znajomości platform danych: Databricks (Delta Lake, DLT) oraz architektury cloud data lakes / lakehouse.
• Doświadczenia z chmurą Azure (ADLS, Data Factory, Synapse) lub równoważnymi usługami chmurowymi.
• Znajomości koncepcji Data Modelling, w tym Medallion architecture oraz dimensional models.
• Doświadczenia w integracji z wykorzystaniem REST API, batch oraz streaming ingestion.
• Znajomości metodyk i narzędzi DevOps: Git, CI/CD pipeline, Azure DevOps (lub podobne).
• Zrozumienia zagadnień jakości danych, performance tuning oraz skalowalności.
• Zrozumienia obszarów takich jak bankowość, ryzyko, raportowanie regulacyjne (regulatory reporting) oraz platform analitycznych.
• Doświadczenia we wspieraniu aplikacji intensywnie przetwarzających dane, używanych do podejmowania decyzji i compliance.

Oferujemy:

• Długofalowa współpraca z wynagrodzeniem w przedziale120 - 150 PLN netto/godz. + VAT.
• Wsparcie przy zakładaniu i prowadzeniu działalności gospodarczej, dla osób bez takiego doświadczenia.
• Sprawny proces rekrutacyjny - dwie rozmowy techniczne z managerami, online (każda maksymalnie po godzinie).
• Współpraca w modelu hybrydowym w wymiarze 2 dni w tygodniu z biura: Wrocław lub Poznań.
• Benefity - prywatna opieka medyczna, karta Multisport.
• Nowoczesny sprzęt zapewniany przez firmę, wraz z softem i konfiguracją.