Senior Data Engineer

HeadHR; Wrocław; On-site; PLN 179,088 - 199,752; Full time

Job summary

Firma technologiczna poszukuje specjalisty danych do współpracy przy projektach w branży automotive. Kandydat powinien mieć doświadczenie w zakresie Azure Databricks, Python oraz IICS. Będzie odpowiedzialny za rozwój rozwiązań danych, optymalizację pipeline’ów oraz integrację z systemami istniejącymi. Oferujemy stawkę do 145 zł/h B2B oraz pracę w trybie hybrydowym w Wrocławiu.

Qualifications

• Bardzo dobra znajomość IICS.
• Doświadczenie w pracy z Azure Databricks, Python oraz Spark.
• Praca z usługami danych Azure (np. Azure Data Lake, Azure Data Factory).
• Doświadczenie z narzędziami do ingestii danych (np. Qlik Replicate).
• Doświadczenie w tworzeniu API (REST/JSON).
• Znajomość procesów ETL i modelowania danych.
• Umiejętność korzystania z narzędzi CI/CD i Git.
• Rozwinięte umiejętności analityczne.
• Doświadczenie w Agile.
• Dobra komunikacja z zespołami technicznymi i biznesowymi.
• Znajomość języka angielskiego na poziomie zaawansowanym.

Responsibilities

• Udział w projekcie dla klienta z branży automotive.
• Rozwój i utrzymanie rozwiązań danych dla procesów sprzedażowych.
• Utrzymanie rozwiązań opartych na Synapse/IICS.
• Aktualizacja środowiska danych do Azure Databricks.
• Projektowanie i rozwój pipeline'ów danych przy użyciu Azure Databricks.
• Implementacja rozwiązań na platformie Azure Data Platform.
• Tworzenie API wspierających integrację systemów.
• Analiza wymagań biznesowych i ich tłumaczenie na rozwiązania techniczne.
• Zapewnienie jakości i bezpieczeństwa danych.
• Integracja danych z istniejącymi systemami.
• Optymalizacja rozwiązań pod kątem wydajności i kosztów.
• Praca hybrydowa: raz w tygodniu we Wrocławiu.

Skills

IICS

Azure Databricks

Python

Spark

Azure Data Lake

API (REST/JSON)

ETL procesy

CI/CD

Systemy kontroli wersji (Git)

Umiejętności analityczne

Agile

Angielski (zaawansowany)

Tools

Qlik Replicate

Power BI

Job description

• udział w projekcie realizowanym dla klienta z branży automotive (obszar Data & AI – sprzedaż),
• rozwój oraz utrzymanie skalowalnych rozwiązań danych wspierających procesy sprzedażowe,
• utrzymanie i rozwój krytycznych rozwiązań opartych na stosie Synapse / IICS,
• aktywny udział w transformacji środowiska danych: migracja do architektury opartej o Azure Databricks,
• projektowanie, rozwój oraz optymalizacja nowoczesnych pipeline’ów danych z wykorzystaniem Azure Databricks i Python,
• implementacja i rozwój rozwiązań na platformie Azure Data Platform (m.in. Data Lake, Databricks),
• tworzenie i rozwój API wspierających data ingestion oraz integrację między systemami,
• współpraca z interesariuszami biznesowymi: analiza wymagań i przekładanie ich na rozwiązania techniczne,
• zapewnienie jakości danych, bezpieczeństwa oraz zgodności z obowiązującymi standardami,
• integracja rozwiązań danych z istniejącymi systemami i procesami biznesowymi,
• optymalizacja rozwiązań pod kątem wydajności, skalowalności i kosztów,
• praca hybrydowa: raz w tygodniu we Wrocławiu,
• stawka do 145zł/h B2B, w zależności od doświadczenia.

Kogo poszukujemy?

• posiadasz bardzo dobrą znajomość IICS,
• masz doświadczenie w pracy z Azure Databricks, Python oraz Spark,
• pracowałeś/aś z usługami danych Azure (np. Azure Data Lake, Azure Data Factory),
• posiadasz doświadczenie z narzędziami do ingestii danych (np. Qlik Replicate, MQ, MQCC),
• masz doświadczenie w tworzeniu API (REST/JSON lub podobne),
• dobrze rozumiesz procesy ETL, modelowanie danych oraz podstawy architektury danych,
• znasz narzędzia CI/CD oraz systemy kontroli wersji (np. Git),
• posiadasz rozwinięte umiejętności analityczne i rozwiązywania problemów,
• masz doświadczenie w pracy w metodykach Agile,
• dobrze komunikujesz się i potrafisz współpracować zarówno z zespołami technicznymi, jak i biznesowymi,
• posługujesz się językiem angielskim na poziomie zaawansowanym.

Mile widziane:

• doświadczenie w przetwarzaniu big data oraz optymalizacji pracy w Spark,
• znajomość zagadnień data governance, lineage danych oraz najlepszych praktyk bezpieczeństwa,
• doświadczenie w pracy z narzędziami do wizualizacji danych (np. Power BI).