Data Engineer (Microsoft Fabric/Azure)

Craftware; Województwo łódzkie; On-site; PLN 180,000 - 240,000; Full time

Job summary

Firma technologiczna poszukuje Data Engineer z minimum 2-3 letnim doświadczeniem. Wymagana bardzo dobra znajomość SQL oraz platformy Microsoft Fabric. Do zadań należy projektowanie procesów przetwarzania danych i automatyzacja integracji danych. Oferujemy dostęp do szkoleń i certyfikatów oraz wsparcie w rozwoju kariery.

Benefits

Możliwość uzyskania certyfikatów

Szkolenia wewnętrzne

Udział w konferencjach branżowych

Qualifications

• Minimum 2–3 lata doświadczenia w pracy jako Data Engineer lub w podobnej roli.
• Bardzo dobra znajomość SQL oraz doświadczenie z PySpark.
• Doświadczenie w tworzeniu i utrzymaniu potoków ETL/ELT.

Responsibilities

• Projektowanie i rozwój procesów przetwarzania danych.
• Tworzenie, rozwój i utrzymanie potoków ETL/ELT.
• Automatyzacja i optymalizacja procesów integracji danych.

Skills

Dobra znajomość SQL

Doświadczenie z PySpark

Komunikatywność

Umiejętność pracy w zespole

Tools

Microsoft Fabric

Data Factory

MS Fabric Pipelines

MS Fabric Notebooks

Job description

Twój obszar zadań:

• Projektowanie i rozwój procesów przetwarzania danych.
• Tworzenie, rozwój i utrzymanie potoków ETL/ELT (w tym implementacja zaawansowanych transformacji danych).
• Automatyzacja i optymalizacja procesów integracji danych z różnych źródeł.
• Budowa i rozwój rozwiązań w oparciu o Microsoft Fabric (Lakehouse, OneLake, Delta Tables, Notebooks, Dataflows Gen2).
• Wdrażanie i konfiguracja komponentów wspierających analitykę danych i raportowanie.
• Projektowanie i optymalizacja modeli danych (znormalizowanych i wielowymiarowych).
• Tworzenie struktur danych wspierających raportowanie, analitykę i eksplorację danych.
• Współpraca z architektami systemów przy projektowaniu i optymalizacji architektury danych.
• Udział w procesach związanych z data governance (zarządzanie dostępami, bezpieczeństwo, zgodność z politykami).
• Monitorowanie jakości danych na wszystkich etapach przetwarzania.
• Optymalizacja wydajności platform danych oraz rozwiązywanie problemów związanych ze skalowalnością.

Zespół

Zespół Software & Data Development liczy około 80 osób, które zajmują się tworzeniem rozwiązań zarówno frontendowych, backendowych, jak i w obszarze danych.

Manager: Łukasz Czerwiński

Rozwój

Otrzymasz dostęp do najnowszych certyfikatów, do których pomożemy Ci w przygotować i pokryjemy wszelkie koszty. Możesz również liczyć na szkolenia wewnętrzne, wymianę wiedzy w zespole, udział w konferencjach branżowych, a także wejście na ścieżkę kariery w strukturach naszej organizacji (jeśli tylko zechcesz).

Oczekiwania kompetencyjne

• Minimum 2–3 lata doświadczenia w pracy jako Data Engineer lub w podobnej roli.
• Dobra znajomość platformy Microsoft Fabric (Lakehouse, OneLake, Delta Tables, Notebooks, Dataflows Gen2).
• Bardzo dobra znajomość SQL oraz doświadczenie z PySpark.
• Doświadczenie w tworzeniu i utrzymaniu potoków ETL/ELT.
• Umiejętność projektowania i optymalizacji modeli danych.
• Znajomość narzędzi integracyjnych: Data Factory, MS Fabric Pipelines, MS Fabric Notebooks.
• Doświadczenie w monitorowaniu jakości danych i optymalizacji wydajności platform danych.
• Komunikatywność i umiejętność pracy w zespole.

Mile Widziane

• Znajomość zagadnień związanych z data governance.
• Doświadczenie w pracy z architekturą danych i systemami chmurowymi (Azure).