Azure Databricks Engineer

ASTEK Polska; Województwo mazowieckie; Remote; PLN 173,000 - 177,000; Full time

Job summary

Astek Group poszukuje Azure Databricks Engineera – K/M do zdalnego wsparcia budowy nowoczesnych platform danych w ekosystemie Microsoft Azure.

Będzie to rola 100% zdalna dla projektów międzynarodowych, skupiająca się na integracji, przetwarzaniu i analizie danych na dużą skalę.

Qualifications

• Posiadasz praktyczne doświadczenie w pracy z Azure Databricks, Azure Data Factory oraz Data Lake.
• Znasz SQL, PySpark, Python oraz procesami ETL/ELT.
• Masz doświadczenie w modelowaniu danych z wykorzystaniem 3NF, Star Schema oraz Snowflake Schema.
• Znasz architekturę Lakehouse, Medallion Architecture, API oraz Event-Driven Architecture.
• Posiadasz doświadczenie w pracy z Git, Azure DevOps oraz procesami CI/CD.
• Korzystałeś/-aś z narzędzi analitycznych, w szczególności Power BI.

Responsibilities

• Projektowanie i rozwój skalowalnych rozwiązań do przetwarzania danych z wykorzystaniem usług Azure.
• Budowa, rozwój oraz utrzymanie pipeline'ów danych integrujących wiele źródeł danych.
• Transformacja i optymalizacja dużych zbiorów danych ustrukturyzowanych oraz nieustrukturyzowanych.
• Współpraca z Data Engineerami, Architektami, Analitykami oraz interesariuszami biznesowymi.
• Udział w pełnym cyklu dostarczania rozwiązań Data & Analytics w środowisku chmurowym.
• Tworzenie i utrzymanie dokumentacji technicznej.
• Zapewnianie wysokiej wydajności, jakości oraz efektywności kosztowej rozwiązań danych.
• Wspieranie rozwoju nowoczesnych platform danych opartych o architekturę Lakehouse i najlepsze praktyki Data Engineering.

Skills

Azure Databricks

Azure Data Factory

Data Lake

SQL

PySpark

Python

ETL/ELT

Data modeling (3NF)

Star Schema

Snowflake Schema

Lakehouse

Medallion Architecture

API

Event-Driven Architecture

Git

Azure DevOps

CI/CD

Power BI

Tools

Git

Azure DevOps

Job description

Założona w 1988 roku we Francji Grupa Astek jest światowym partnerem w obszarze doradztwa inżynieryjnego oraz IT. Dzięki swojej wiedzy specjalistycznej w wielu sektorach przemysłowych i technologicznych, Astek wspiera międzynarodowych Klientów w rozwijaniu i wdrażaniu produktów oraz usług, jednocześnie uczestnicząc w ich transformacji cyfrowej.

Grupa Astek od momentu powstania opiera swój rozwój na kulturze przedsiębiorczości i innowacyjności oraz na budowaniu umiejętności swoich ponad 10 000 pracowników, którzy codziennie uczestniczą w zróżnicowanych projektach technologicznych i inżynieryjnych.

Stanowisko

Obecnie dla naszego klienta poszukujemy kandydata/kandydatki na stanowisko Azure Databricks Engineer - K/M.

Dodatkowe informacje

Projekt realizowany jest w modelu 100% zdalnym. Osoba na tym stanowisku będzie wspierać budowę i rozwój nowoczesnych platform danych oraz rozwiązań analitycznych opartych o ekosystem Microsoft Azure, pracując przy projektach związanych z integracją, przetwarzaniem i analizą danych na dużą skalę.

Oferowane wynagrodzenie

Wynagrodzenie: od 940 do 960 PLN netto/dzień, w zależności od posiadanego doświadczenia i kompetencji.

Sprawdzisz się w tej roli, jeżeli:

• Posiadasz praktyczne doświadczenie w pracy z Azure Databricks, Azure Data Factory oraz Data Lake.
• Znasz platformę Microsoft Azure i nowoczesne architektury danych.
• Znasz SQL, PySpark, Python oraz procesami ETL/ELT.
• Masz doświadczenie w modelowaniu danych z wykorzystaniem 3NF, Star Schema oraz Snowflake Schema.
• Znasz architekturę Lakehouse, Medallion Architecture, API oraz Event-Driven Architecture.
• Posiadasz doświadczenie w pracy z Git, Azure DevOps oraz procesami CI/CD.
• Korzystałeś/-aś z narzędzi analitycznych, w szczególności Power BI.
• Potrafisz skutecznie współpracować z zespołami technicznymi i biznesowymi oraz komunikować złożone zagadnienia w przystępny sposób.

Mile widziane:

• Doświadczenie w budowie platform analitycznych klasy enterprise.
• Doświadczenie w projektach migracji rozwiązań do chmury.
• Doświadczenie w pracy z dużymi wolumenami danych oraz technologiami Big Data.
• Znajomość Unity Catalog, MLflow, Databricks Jobs oraz Databricks Pipelines.

Zadania, które na Ciebie czekają:

• Projektowanie i rozwój skalowalnych rozwiązań do przetwarzania danych z wykorzystaniem usług Azure.
• Budowa, rozwój oraz utrzymanie pipeline'ów danych integrujących wiele źródeł danych.
• Transformacja i optymalizacja dużych zbiorów danych ustrukturyzowanych oraz nieustrukturyzowanych.
• Współpraca z Data Engineerami, Architektami, Analitykami oraz interesariuszami biznesowymi.
• Udział w pełnym cyklu dostarczania rozwiązań Data & Analytics w środowisku chmurowym.
• Tworzenie i utrzymanie dokumentacji technicznej.
• Zapewnianie wysokiej wydajności, jakości oraz efektywności kosztowej rozwiązań danych.
• Wspieranie rozwoju nowoczesnych platform danych opartych o architekturę Lakehouse i najlepsze praktyki Data Engineering.

Nasz proces rekrutacji

Rozmowa z naszym Rekruterem -> Rozmowa z naszym Business Managerem -> Spotkanie z Klientem. W uzasadnionych przypadkach po rozmowie z Rekruterem wprowadzamy dodatkowy etap weryfikacji technicznej.

Co oferujemy

• Długoterminowa współpraca
• Szkolenia techniczne, certyfikaty i podnoszenie kwalifikacji
• Mentoring Competence Center - bycie członkiem społeczności CC od pierwszego dnia pracy jest szansą na rozwijanie swoich umiejętności, uczestniczenie w różnych konferencjach oraz dzielenie się wiedzą i doświadczeniem z ludźmi, którzy na co dzień mierzą się z tymi samymi wyzwaniami
• Jasna ścieżka kariery
• Pakiet benefitów pracowniczych (Multisport, prywatna opieka medyczna, ubezpieczenie na życie)
• Przyjazną atmosferę pracy, imprezy integracyjne i spotkania team-buildingowe

Klauzula informacyjna

Administratorem Pana/Pani danych osobowych jest ASTEK Polska sp. z o.o. z siedziba w Warszawie (00-133) przy Al. Jana Pawla II 22. Przysługuje Pani/Panu prawo do wglądu do danych, prawo żądania usunięcia danych itp. Szczegółowe informacje dotyczace przetwarzania: http://astek.pl/polityka-prywatnosci W dowolnym momencie przysługuje Panu/Pani prawo do wycofania wyrażonych zgód. W razie wycofania zgód prosimy o kontakt e-mailowy na [e-mail] pisemnie na adres administratora. Procedura dokonywania zgłoszeń przez sygnalistów w ASTEK Polska sp. z o. o.: https://astek.pl/sygnalisci/

Nr ref AO247920