Azure Data Engineer

Traffit

Wrocław

Hybrid

PLN 152,000 - 193,000

Full time

2 days ago
Be an early applicant

A complete application in a minute

Tailored resume and cover letter, ready to send.

Get past ATS filters

Benefits offered by this job

Private medical care
Multisport card

Job summary

Traffit specjalizuje się w kompleksowej rekrutacji IT i obecnie dla klienta poszukuje Azure Data Engineer. Pracujesz w międzynarodowym zespole PL Data Readiness, w środowisku nastawionym na współpracę i najnowsze technologie inżynierii danych.

Twoje obowiązki obejmują projektowanie, rozwój i optymalizację data pipeline’ów z Azure Databricks, Spark, Python i SQL; tworzenie data products udostępnianych przez Unity Catalog; wdrażanie operacji w Databricks as code; współpracę z analitykami i

Qualifications

  • Ekspercka wiedza z zakresu Azure Databricks, Spark oraz Python (wymóg konieczny).
  • Bardzo dobra znajomość SQL, w tym złożonych zapytań, transformacji oraz optymalizacji wydajności (wymóg konieczny).
  • Doświadczenia z Declarative Automation Bundles (DAB).
  • Solidnego doświadczenia z Unity Catalog oraz ADLS Gen2.
  • Dobrego zrozumienia procesów ETL/ELT, modelowania danych oraz architektury danych.
  • Znajomości CI/CD pipeline oraz Git.
  • Silnych umiejętności rozwiązywania problemów w Agile.

Responsibilities

  • Projektowanie, rozwój oraz optymalizacja data pipeline oraz workflows z użyciem Azure Databricks, Spark, Python i SQL.
  • Tworzenie i utrzymywanie produktów danych udostępnianych poprzez Unity Catalog.
  • Wdrażanie i zarządzanie obciążeniami w Databricks as a code (DAB).
  • Ściśle współpracujesz z analitykami biznesowymi i architektami danych w celu przekładania wymagań na rozwiązania techniczne.
  • Zapewnianie jakości, bezpieczeństwa oraz zgodności danych.
  • Ciągłe doskonalenie wydajności, kosztów i skalowalności systemów danych.

Skills

Azure Databricks
Spark
Python
SQL
CI/CD
Git
DAB
Unity Catalog
ADLS Gen2
ETL/ELT

Tools

Databricks
Python packaging (wheel)
REST API
Structured Streaming

Job description

Be in IT specjalizuje się w kompleksowej rekrutacji specjalistów IT dla polskich i międzynarodowych firm. Wspieramy klientów w pozyskiwaniu ekspertów z obszarów software development, AI, data, cloud, cybersecurity, ERP, CRM oraz zarządzania IT.

Stawiamy na znajomość technologii, przejrzystą komunikację i partnerskie podejście, dzięki którym skutecznie dopasowujemy kandydatów do potrzeb organizacji i realizowanych projektów.

Obecnie dla naszego klienta poszukujemy osoby na stanowisko: Azure Data Engineer.

Zakres obowiązków:
  • Długofalowa współpraca z międzynarodową, topową firmą consultingową, świadczącą usługi IT dla dużych i średnich firm z różnorodnych sektorów.
  • Dołączenie do zorientowanego biznesowo zespołu PL Data Readiness z dużą energią oraz praca z najnowszymi technologiami inżynierii danych w międzynarodowym, opartym na współpracy środowisku.
  • Współtworzenie produktów danych (data products) dla dynamicznie rozwijającego się obszaru łańcucha dostaw w produkcji (production supply chain).
  • Projektowanie, rozwój oraz optymalizacja data pipeline oraz przepływów pracy (workflows) z wykorzystaniem Azure Databricks, Spark, Python oraz SQL.
  • Tworzenie i utrzymywanie produktów danych udostępnianych poprzez Unity Catalog.
  • Wdrażanie i zarządzanie obciążeniami (workloads) w Databricks as a code przy użyciu Declarative Automation Bundles (dawniej Databricks Asset Bundles, DAB).
  • Ścisła współpraca z analitykami biznesowymi i architektami danych w celu przekładania wymagań na rozwiązania techniczne.
  • Zapewnianie jakości, bezpieczeństwa oraz zgodności (compliance) danych.
  • Ciągłe doskonalenie wydajności, efektywności kosztowej oraz skalowalności systemów danych.
Oczekujemy:
  • Eksperckiej wiedzy z zakresu Azure Databricks, Spark oraz Python (wymóg konieczny).
  • Bardzo dobrej znajomości SQL, w tym pisania złożonych zapytań, transformacji oraz optymalizacji wydajności (performance tuning) (wymóg konieczny).
  • Doświadczenia z Declarative Automation Bundles (DAB).
  • Solidnego doświadczenia z Unity Catalog oraz ADLS Gen2.
  • Dobrego zrozumienia procesów ETL/ELT, modelowania danych oraz zasad architektury danych.
  • Znajomości CI/CD pipeline oraz Git.
  • Silnych umiejętności rozwiązywania problemów oraz ustrukturyzowanego sposobu pracy w zwinnym modelu dostarczania (Agile).
  • Doskonałych umiejętności komunikacyjnych oraz otwartości na współpracę z interesariuszami biznesowymi i zespołami interdyscyplinarnymi.
  • Mile widziane:
    • Doświadczenie z dbt (preferowane dbt-databricks).
    • Doświadczenie w pakietowaniu kodu Python jako pakiety wheel.
    • Doświadczenie w pracy z API (REST lub równoważne).
    • Doświadczenie ze Structured Streaming w Databricks.
    • Wiedza z zakresu data governance, lineage oraz najlepszych praktyk bezpieczeństwa.
    • Znajomość Power BI lub podobnych narzędzi do wizualizacji danych.
  • Gotowości do współpracy w modelu hybrydowym tj. 2 dni w tygodniu obecności w biurze we Wrocławiu.
  • Znajomość języka angielskiego na poziomie B2 lub C1 umożliwiająca swobodną komunikację w międzynarodowym środowisku
  • Mile widziana dostępność ASAP; akceptowalny jest maksymalnie miesięczny okres wypowiedzenia ze skutkiem na koniec miesiąca
  • Długofalowa współpraca z wynagrodzeniem w przedziale 110-140 PLN netto/godz. + VAT.
  • Wsparcie przy zakładaniu i prowadzeniu działalności gospodarczej, dla osób bez takiego doświadczenia.
  • Sprawny proces rekrutacyjny - dwie rozmowy techniczne z managerami, online (każda maksymalnie po godzinie).
  • Współpraca w modelu hybrydowym w wymiarze 2 dni w tygodniu z biura we Wrocławiu.
  • Benefity - prywatna opieka medyczna, karta Multisport.
  • Nowoczesny sprzęt zapewniany przez firmę, wraz z softem i konfiguracją.
Get your free, confidential resume review.

or drag and drop your file here.

Similar jobs

Similar jobs worth comparing

Senior Data Engineer
Senior Data Engineer

Clurgo Ltd. • Polska

Hybrid
PLN 180,000 - 300,000
Remote work
B2B contract
Interview feedback
Senior Data Engineer
Senior Data Engineer

Clurgo • Województwo mazowieckie

Remote
PLN 180,000 - 260,000
Praca zdalna
Kontrakt B2B
Feedback w procesie rekrutacyjnym
Senior Cloud Data Engineer (Azure)
Senior Cloud Data Engineer (Azure)

Future Processing SA • Gliwice

Remote
PLN 210,000 - 300,000
100% remote
Szkolenia chmurowe opłacane przez firm
Azure Data Engineer
Azure Data Engineer

Infotree Global Solutions Inc. • Polska

On-site
PLN 180,000 - 270,000
Associate Azure Data Support Specialist (w/m/d)
Associate Azure Data Support Specialist (w/m/d)

Smarketer Group • Poznań

Remote
PLN 167,400 - 223,200
Elastyczne godziny pracy
Szkolenia zewnętrzne i wewnętrzne
Dostęp do najnowszych technologii IT
+2
Azure Data Support Specialist (w/m/d)
Azure Data Support Specialist (w/m/d)

Smarketer • Poznań

Hybrid
PLN 89,280 - 133,920
Praca w modelu zdalnym
Elastyczne godziny pracy
Szkolenia zewnętrzne i wewnętrzne
+1
Databricks Data Engineer
Databricks Data Engineer

Onwelo SA • Polska

Remote
PLN 180,000 - 300,000
Elastyczne godziny pracy
Praca zdalna
Szkolenia wewnętrzne
+1
Azure Data Engineer: Data Pipelines & Lakehouse Expert
Azure Data Engineer: Data Pipelines & Lakehouse Expert

Infotree Global Solutions Inc. • Polska

On-site
PLN 180,000 - 270,000
Azure Data Engineer – Remote & Flexible Hours, AI-ready
Azure Data Engineer – Remote & Flexible Hours, AI-ready

ALGOMINE Group Sp. z o.o. • Polska

Remote
PLN 90,000 - 130,000
Remote work
Flexible hours
Private medical care
+1
Azure Data Engineer
Azure Data Engineer

ALGOMINE Group Sp. z o.o. • Polska

Remote
PLN 90,000 - 130,000
Remote work
Flexible hours
Private medical care
+1
Top locations