Data Engineer / ETL Developer (Pentaho)

TQLO SP. Z O.O.; United States; Remote; USD 31,000 - 46,000; Full time

Job summary

TQLO SP. Z O.O. poszukuje doświadczonego Data Engineera / ETL Developera, który wesprze klienta w rozwoju środowiska przetwarzania danych i hurtowni danych. Projekt koncentruje się na ETL z użyciem Pentaho Data Integration (PDI) oraz integracji danych z różnych źródeł, a także na rozwijaniu modeli danych i raportów.

Praca z Microsoft Fabric i procesami batch/real-time oferuje szerokie możliwości techniczne. Lokalizacja w Poznaniu lub zdalnie 100% – B2B. Wymagane jest min.

Qualifications

• Minimum 3 lata doświadczenia komercyjnego w Data Engineering/ETL lub Data Warehouse.
• Praktyczne, komercyjne doświadczenie z Pentaho Data Integration (PDI).
• Bardzo dobra znajomość SQL i tworzenia zaawansowanych zapytań oraz optymalizacji.

Responsibilities

• Projektowanie, rozwój i utrzymanie procesów ETL z użyciem PDI.
• Budowa i optymalizacja procesów integracji danych z różnych źródeł.
• Projektowanie i rozwój struktur hurtowni danych oraz modeli danych.
• Tworzenie i optymalizacja zapytań SQL.
• Rozwijanie procesów przetwarzania danych dla raportowania i analityki.
• Praca z dużymi zbiorami danych i różnorodnymi formatami (JSON, CSV, XML).
• Identyfikowanie i rozwiązywanie problemów jakości danych.
• Udział w projekcie Microsoft Fabric.

Skills

Pentaho Data Integration

SQL

Python

ETL Development

Data Warehousing

Jira

Confluence

Power BI

Tools

Pentaho Data Integration (PDI)

Jira

Confluence

Power BI

Microsoft Fabric

Job description

W TQLO poszukujemy doświadczonego Data Engineera / ETL Developera, który wesprze naszego klienta w rozwoju i utrzymaniu środowiska przetwarzania danych oraz hurtowni danych.

Projekt obejmuje rozwój i optymalizację procesów ETL, integrację danych pochodzących z różnych systemów oraz rozwój rozwiązań analitycznych i raportowych.

Kluczową technologią w projekcie jest Pentaho Data Integration (PDI), dlatego poszukujemy osoby posiadającej praktyczne, komercyjne doświadczenie w pracy z tym narzędziem.

Dodatkowym obszarem projektu jest rozwój środowiska danych z wykorzystaniem technologii Microsoft, w tym Microsoft Fabric.

Lokalizacja: Poznań preferowany lub zdalnie 100%

Forma współpracy: B2B

Start: ASAP / do uzgodnienia

Twój zakres obowiązków

• Projektowanie, rozwój i utrzymanie procesów ETL z wykorzystaniem Pentaho Data Integration (PDI / Kettle).
• Budowa i optymalizacja procesów integracji danych pochodzących z różnych systemów.
• Projektowanie i rozwój struktur hurtowni danych oraz modeli danych.
• Tworzenie i optymalizacja zaawansowanych zapytań SQL.
• Rozwijanie i utrzymywanie procesów przetwarzania danych na potrzeby raportowania i analityki.
• Praca z dużymi zbiorami danych oraz różnorodnymi formatami danych (JSON, CSV, XML).
• Identyfikowanie i rozwiązywanie problemów związanych z jakością oraz spójnością danych.
• Rozwój i optymalizacja istniejących rozwiązań Data Warehouse.
• Udział w projektach związanych z rozwojem środowiska Microsoft Fabric.
• Współpraca z interesariuszami biznesowymi i technicznymi w zakresie analizy wymagań.

Nasze wymagania

• Must-have:
• Minimum 3 lata doświadczenia komercyjnego w obszarze Data Engineering, ETL Development lub Data Warehouse.
• Praktyczne, komercyjne doświadczenie z Pentaho Data Integration (PDI / Kettle) - warunek konieczny.
• Bardzo dobra znajomość SQL, w tym tworzenia zaawansowanych zapytań i optymalizacji ich wydajności.
• Doświadczenie w projektowaniu, implementacji i utrzymaniu procesów ETL.
• Znajomość relacyjnych baz danych oraz architektury hurtowni danych.
• Doświadczenie w integracji danych pochodzących z różnych źródeł.
• Znajomość Python.
• Znajomość Microsoft Fabric.
• Umiejętność analizowania i rozwiązywania problemów związanych z przetwarzaniem danych.
• Samodzielność oraz dobre umiejętności komunikacyjne.

• Mile widziane:
• Doświadczenie z Microsoft SQL Server i T-SQL.
• Znajomość Microsoft Fabric Data Factory, Lakehouse lub Data Warehouse.
• Doświadczenie w migracji procesów ETL pomiędzy różnymi technologiami.
• Znajomość Power BI.
• Doświadczenie w przetwarzaniu danych w trybie batch i real-time.
• Znajomość zagadnień Data Governance.
• Doświadczenie w pracy z Jira i Confluence.

Co oferujemy?

• Współpracę B2B przy projekcie związanym z rozwojem środowiska danych.
• Możliwość wykorzystania doświadczenia w Pentaho oraz rozwijania kompetencji w Microsoft Fabric.
• Udział w projektowaniu i optymalizacji rozwiązań integracji danych.
• Współpracę z doświadczonym zespołem technologicznym.
• Długoterminową perspektywę współpracy - w zależności od ustaleń projektowych.

Dziękujemy za wszystkie zgłoszenia! Skontaktujemy się z wybranymi osobami.