Data Engineer

FABRITY; Warszawa; On-site; PLN 180,000 - 240,000; Full time

Job summary

FABRITY w Warszawie poszukuje doświadczonego Data Engineera do samodzielnej realizacji projektów budowy platform danych dla klientów przemysłowych i produkcyjnych. Zakres obejmuje analizę potrzeb, projekt architektury, implementację i uruchomienie rozwiązań, z wykorzystaniem Pythona i Apache Spark.

Wymagana samodzielność, zdolność tłumaczenia zagadnień technicznych osobom nietechnicznym, oraz gotowość do okazjonalnych wyjazdów do klienta (1–3 razy w kwartale).

Responsibilities

• Zbieranie i uzgadnianie wymagań z klientem (biznes + IT)
• Analiza źródeł danych, ocena jakości danych i komunikowanie problemów
• Projekt architektury platform danych: warstwy surowej, hurtowni i systemów analitycznych
• Projektowanie i implementacja baz danych oraz hurtowni danych
• Projektowanie data lake i procesów ETL/ELT (Python, Spark)
• Budowa i utrzymanie automatyzacji, monitoringu i wdrożeń produkcyjnych
• Wsparcie klienta po wdrożeniu, rozwój platformy o nowe źródła danych
• Doświadczenie w pracy z klientami przemysłowymi (MES/ERP/SCADA)
• Umiejętność pracy samodzielnej i tłumaczenia zagadnień technicznych

Job description

Poszukujemy doświadczonego Data Engineera do samodzielnej realizacji projektów budowy platform danych dla klientów przemysłowych i produkcyjnych. Osoba na tym stanowisku odpowiada za cały cykl — od analizy potrzeb u klienta, przez projekt architektury, po implementację i uruchomienie rozwiązania.

• Zbieranie i uzgadnianie wymagań bezpośrednio z klientem — z przedstawicielami biznesu oraz działów IT
• Analiza systemów i źródeł danych klienta, ocena jakości danych i komunikowanie wykrytych problemów
• Projektowanie architektury platform danych: warstwy surowej, hurtowni oraz systemów analitycznych
• Projektowanie i implementacja modeli baz oraz hurtowni danych
• Projektowanie i implementacja rozwiązań klasy data lake
• Budowa procesów ETL/ELT z wykorzystaniem platform integracji danych, rozszerzanych o Python i Spark
• Automatyzacja, monitoring oraz wdrożenie produkcyjne rozwiązań
• Wsparcie klienta po wdrożeniu i rozwój platformy o kolejne źródła danych
• Doświadczenie w analizie wymagań, również w bezpośredniej pracy z klientem
• Doświadczenie w projektowaniu i implementacji baz oraz hurtowni danych
• Doświadczenie w projektowaniu i implementacji data lake'ów
• Doświadczenie w budowie procesów ETL/ELT z wykorzystaniem platform integracji danych
• Znajomość Pythona i Apache Spark
• Umiejętność samodzielnego prowadzenia zadań od analizy po wdrożenie
• Komunikatywność i umiejętność tłumaczenia zagadnień technicznych osobom nietechnicznym
• Gotowość do okazjonalnych wyjazdów do klienta (1–3 razy w kwartale)
• Doświadczenie w pracy z klientami przemysłowymi lub produkcyjnymi (systemy MES, ERP, SCADA, dane z czujników)
• Znajomość metodyk modelowania hurtowni danych (Kimball, Data Vault)