Senior Data Engineer: Cloud Data (Azure/Databricks)

OPTIVEUM SPÓŁKA Z OGRANICZONĄ ODPOWIEDZIALNOŚCIĄ; Wrocław; Hybrid; PLN 182,000 - 259,000; Full time

Job summary

Optiveum Spółka z ograniczoną odpowiedzialnością poszukuje Senior Data Engineera do pracy w zespole projektowym z klientem z branży motoryzacyjnej. Pracownik zarządza danymi od projektowania architektury po dostarczanie wysokiej jakości danych analitycznych dla odbiorców zewnętrznych.

Rola obejmuje migracje danych do chmury Azure, tworzenie i optymalizację potoków ETL/ELT, projektowanie modeli danych oraz utrzymanie API.

Qualifications

• Doświadczenie end-to-end z platformami analitycznymi, danymi i hurtowniami danych.
• Wiedza SQL/T-SQL, Python, Spark, Databricks, Delta Lake i Azure Data Factory.
• Doświadczenie z wzorcami danych: batch, incremental, CDC, event-driven.
• Modelowanie danych (logiczne i fizyczne).
• Projektowanie ETL/ELT, w tym SSIS i komponenty skryptowe w C#.
• Rozwój API i utrzymanie.
• Chmura Azure i modernizacja (SSIS do chmury).
• Zwinne metody pracy, Jira/JQL, Confluence.
• Chęć rozwoju w stronę roli Data/Analytics Architect.
• Dokumentacja i komunikacja biznesowa po angielsku.
• Gotowość do dostarczenia zaświadczenia o niekaralności.

Responsibilities

• Współpraca z analitykami biznesowymi nad projektowaniem architektur docelowych, modeli danych i przepływów.
• Zarządzanie pobieraniem, czyszczeniem, standaryzacją i udostępnianiem danych przez API.
• Optymalizacja istniejących przepływów ETL/ELT i modernizacja rozwiązań legacy.
• Ocena wykonalności, ryzyk i zależności; przygotowanie gotowych projektów i dokumentacji.
• Współpraca z interesariuszami w celu spełnienia wymagań jakościowych, bezpieczeństwa i stabilności.
• Analizowanie i usprawnianie rozwiązań analitycznych oraz wyjaśnianie tematów technicznych biznesowym odbiorcom.

Skills

End-to-end analytics

SQL/T-SQL

Python

Apache Spark

Databricks

Delta Lake

Azure Data Factory

Batch/CDC/Event-driven data patterns

Data modelling

ETL/ELT design

API development

Cloud on Azure

Agile (Jira/Confluence)

Documentation/communication in English

Tools

SSIS

Jira

Confluence

Job description

Optiveum Spółka z ograniczoną odpowiedzialnością poszukuje Senior Data Engineera do pracy w zespole projektowym z klientem z branży motoryzacyjnej. Pracownik zarządza danymi od projektowania architektury po dostarczanie wysokiej jakości danych analitycznych dla odbiorców zewnętrznych.

Rola obejmuje migracje danych do chmury Azure, tworzenie i optymalizację potoków ETL/ELT, projektowanie modeli danych oraz utrzymanie API.