Data Engineer

DCG; Katowice; On-site; PLN 180,000 - 240,000; Full time

Benefits offered by this job

Dofinansowanie karty sportowej

Wsparcie konsultanta

Program rekomendacji pracowników

Job summary

DCG poszukuje specjalisty ds. hurtowni danych do analizy wymagań biznesowych, projektowania modeli danych i budowy procesów ETL. Będziesz łączyć źródła danych Oracle, SQL Server, Kafka i JSON/TXT, aby zasilić raporty i dashboards Power BI. Wymagana jest praktyczna znajomość SSIS, T-SQL i hurtowni danych.

Oferujemy możliwość rozwoju kompetencji w obszarze integracji danych i raportowania. Celem jest dostarczanie wysokiej jakości danych do analiz biznesowych w firmie DCG.

Qualifications

• Minimum 5 lat doświadczenia z Microsoft SQL Server oraz projektowaniem/budową hurtowni danych.
• Bardzo dobra znajomość T-SQL, obejmująca procedury składowane, funkcje, widoki i optymalizację zapytań.
• Duże doświadczenie w pracy z SSIS, w budowie/utrzymaniu i diagnostyce procesów ETL.
• Doświadczenie w projektowaniu/hurtowni danych i data martów.
• Praktyczna umiejętność przetwarzania JSON/XML/txt do modelu relacyjnego.
• Doświadczenie w modelowaniu danych dla raportowania/analiz.
• Integracja danych z Oracle, SQL Server, Kafka i plików wymiany.
• Umiejętność współpracy z interesariuszami biznesowymi i technicznymi.

Responsibilities

• Analiza wymagań biznesowych i definiowanie zakresu danych.
• Projektowanie modelu danych dla data martu.
• Budowa procesów integracyjnych i ETL z różnych źródeł (Oracle, SQL Server, Kafka, JSON, TXT).
• Transformacja i mapowanie danych do docelowego modelu relacyjnego.
• Przygotowanie i utrzymanie warstwy danych dla raportów i Power BI.
• Diagnoza i rozwiązywanie problemów przetwarzania i jakości danych.
• Przygotowywanie dokumentacji technicznej.

Skills

SQL Server

T-SQL

SSIS

Data warehousing

Data modeling

ETL design

JSON/XML parsing

Stakeholder collaboration

Tools

SSIS

Power BI

Oracle

Kafka

Job description

Zakres obowiązków:

• Analiza wymagań biznesowych oraz współpraca z interesariuszami przy definiowaniu zakresu danych
• Projektowanie modelu danych dla data martu
• Budowa procesów integracyjnych i ETL zasilających dane z różnych źródeł (Oracle, SQL Server, Kafka, pliki JSON i TXT)
• Transformacja i mapowanie danych do docelowego modelu relacyjnego
• Przygotowanie algorytmów przetwarzających dane w formie wydajnych procedur składowanych
• Przygotowanie i utrzymanie warstwy danych wykorzystywanej przez raporty oraz dashboardy Power BI
• Diagnostyka i rozwiązywanie problemów związanych z przetwarzaniem danych oraz jakością danych
• Przygotowywanie dokumentacji technicznej

Wymagania:

• Gotowość do okazjonalnych wizyt w biurze w Katowicach
• Minimum 5 lat doświadczenia w pracy z Microsoft SQL Server, w tym projektowania, rozwoju i utrzymania baz danych
• Bardzo dobra znajomość T-SQL, obejmująca tworzenie procedur składowanych, funkcji, widoków oraz optymalizację wydajności zapytań
• Bardzo duże doświadczenie w pracy z SSIS (SQL Server Integration Services), w szczególności w budowie, utrzymaniu i diagnostyce procesów integracyjnych oraz ETL
• Doświadczenie w projektowaniu i budowie hurtowni danych oraz data martów
• Praktyczna umiejętność przetwarzania danych w formatach JSON, XML oraz plikach tekstowych, obejmująca parsowanie, walidację i transformację danych do modelu relacyjnego
• Doświadczenie w modelowaniu danych, obejmujące projektowanie modeli oraz optymalizację struktur danych na potrzeby raportowania i analiz
• Doświadczenie w integracji danych pochodzących z różnych źródeł, w szczególności z baz Oracle, Microsoft SQL Server, komunikatów Kafka oraz plików wymiany danych
• Umiejętność projektowania i implementacji procesów zasilania danych, obejmujących pozyskiwanie, transformację, walidację i udostępnianie danych
• Umiejętność samodzielnej współpracy z interesariuszami biznesowymi i technicznymi, obejmująca pozyskiwanie wymagań, doprecyzowywanie potrzeb, identyfikację brakujących informacji oraz przekładanie wymagań biznesowych na rozwiązania techniczne i modele danych
• Doświadczenie w diagnozowaniu i rozwiązywaniu problemów na środowiskach produkcyjnych
• Umiejętność tworzenia i utrzymywania dokumentacji technicznej dla rozwijanych rozwiązań

Mile widziane:

• Doświadczenie w zakresie wizualizacji i raportowania danych z wykorzystaniem SSRS oraz Power BI
• Znajomość rozwiązań opartych na Microsoft Fabric, w szczególności w obszarze integracji danych, analityki i raportowania

Oferujemy:

• Dofinansowanie karty sportowej
• Stałe wsparcie konsultanta
• Program rekomendacji pracowników