Data Engineer

Solid Company; Warszawa; Hybrid; PLN 120,000 - 180,000; Full time

Job summary

Solid Company w Warszawie poszukuje doświadczonego specjalisty ds. analizy danych i hurtowni danych. Zakres obejmuje analizę wymagań, projektowanie modelu danych i budowę procesów ETL integrujących dane z wielu źródeł.

Doświadczony specjalista z co najmniej 5 latami praktyki w SQL Server, T-SQL, SSIS, oraz modelowaniu danych. Stanowisko wymaga kontaktu z interesariuszami i przygotowania warstwy raportowej dla Power BI.

Qualifications

• Minimum 5 lat doświadczenia z Microsoft SQL Server, w tym projektowanie, rozwój i utrzymanie baz danych.
• Bardzo dobra znajomość T-SQL i optymalizacji zapytań.
• Doświadczanie w SSIS, budowa i diagnostyka procesów ETL.
• Doświadczenie w hurtowniach danych i data martach.
• Umiejętność przetwarzania danych w JSON, XML i plikach tekstowych.

Responsibilities

• Analiza wymagań biznesowych i określenie zakresu danych.
• Projektowanie modelu danych dla data martu.
• Budowa procesów integracyjnych i ETL z różnych źródeł.
• Transformacja i mapowanie danych do docelowego modelu relacyjnego.
• Przygotowanie i utrzymanie warstwy danych pod raporty Power BI.
• Diagnostyka i rozwiązywanie problemów związanych z jakością danych.

Skills

SQL Server

T-SQL

Data Integration

Data Modeling

ETL

Performance Tuning

Stakeholder Comm

Tools

SSIS

SQL Server

Kafka

JSON

XML

Job description

• Analiza wymagań biznesowych oraz współpraca z interesariuszami przy definiowaniu zakresu danych
• Projektowanie modelu danych dla data martu
• Budowa procesów integracyjnych i ETL zasilających dane z różnych źródeł (Oracle, SQL Server, Kafka, pliki JSON i TXT)
• Transformacja i mapowanie danych do docelowego modelu relacyjnego
• Przygotowanie algorytmów przetwarzających dane w formie wydajnych procedur składowanych
• Przygotowanie i utrzymanie warstwy danych wykorzystywanej przez raporty oraz dashboardy Power BI
• Diagnostyka i rozwiązywanie problemów związanych z przetwarzaniem danych oraz jakością danych
• Przygotowywanie dokumentacji technicznej

Kogo poszukujemy?

• Gotowość do okazjonalnych wizyt w biurze w Katowicach
• Minimum 5 lat doświadczenia w pracy z Microsoft SQL Server, w tym projektowania, rozwoju i utrzymania baz danych
• Bardzo dobra znajomość T-SQL, obejmująca tworzenie procedur składowanych, funkcji, widoków oraz optymalizację wydajności zapytań
• Bardzo duże doświadczenie w pracy z SSIS (SQL Server Integration Services), w szczególności w budowie, utrzymaniu i diagnostyce procesów integracyjnych oraz ETL
• Doświadczenie w projektowaniu i budowie hurtowni danych oraz data martów
• Praktyczna umiejętność przetwarzania danych w formatach JSON, XML oraz plikach tekstowych, obejmująca parsowanie, walidację i transformację danych do modelu relacyjnego
• Doświadczenie w modelowaniu danych, obejmujące projektowanie modeli oraz optymalizację struktur danych na potrzeby raportowania i analiz
• Doświadczenie w integracji danych pochodzących z różnych źródeł, w szczególności z baz Oracle, Microsoft SQL Server, komunikatów Kafka oraz plików wymiany danych
• Umiejętność samodzielnej współpracy z interesariuszami biznesowymi i technicznymi, obejmująca pozyskiwanie wymagań, doprecyzowywanie potrzeb, identyfikację brakujących informacji oraz przekładanie wymagań biznesowych na rozwiązania techniczne i modele danych