Remote Data Integration & Quality Engineer

Scalo; Wrocław; Hybrid; PLN 124,000 - 207,000; Full time

Benefits offered by this job

Opieka medyczna

Karta sportowa

Platforma kafeteryjna

Job summary

Scalo we Wrocławiu poszukuje specjalisty ds. data engineering, który wesprze projekt związany z przygotowaniem danych pod modelowanie oraz budową spójnej i kompletnej historii danych wykorzystywanych w procesach modelowych.

Zakres obejmuje projektowanie i rozwój warstw danych oraz procesów ich zasilania. Wymagane co najmniej 6 lat doświadczenia z danymi, bardzo dobra znajomość SQL, praktyczna znajomość Python oraz Apache Airflow.

Qualifications

• Minimum 6 years of commercial data experience including building data layers, data integration or analytical solutions.
• Bardzo dobra znajomość SQL na zaawansowanym poziomie.
• Praktyczna znajomość Pythona.
• Doświadczenie z narzędziami do automatyzacji/orkiestracji danych (np. Apache Airflow).
• Doświadczenie w integracji/mappingu danych z wielu źródeł, ich ujednoliceniu i definiowaniu reguł transformacji.
• Doświadczenie w definiowaniu i utrzymywaniu reguł jakości danych.
• Dobre rozumienie architektury przepływu danych.
• Doświadczenie w realizacji projektów z wieloma zespołami.
• Umiejętność planowania działań i zarządzania zależnościami.
• Umiejętność przekładania potrzeb na konkretne rozwiązania.
• Komunikowanie decyzji, ryzyk i konsekwencji.
• Samodzielność i ownership.
• Znajomość angielskiego min. B2.

Responsibilities

• Udział w projekcie związanym z przygotowaniem danych pod modelowanie oraz budową historii danych.
• Projektowanie i rozwój warstw danych oraz procesów ich zasilania.
• Integracja danych z wielu źródeł, ich czyszczenie, ujednolicanie, transformacja i walidacja.
• Analiza potrzeb i planowanie kolejnych etapów realizacji rozwiązań data engineeringowych.
• Koordynacja przepływu informacji między uczestnikami projektu i zespołami w Agile.

Skills

SQL

Python

Airflow

Data integration

Data mapping

Data quality rules

Data architecture

Cross-team collaboration

Planning & prioritization

Ownerhip

English (B2)

Tools

Apache Airflow

Job description

Scalo we Wrocławiu poszukuje specjalisty ds. data engineering, który wesprze projekt związany z przygotowaniem danych pod modelowanie oraz budową spójnej i kompletnej historii danych wykorzystywanych w procesach modelowych.

Zakres obejmuje projektowanie i rozwój warstw danych oraz procesów ich zasilania. Wymagane co najmniej 6 lat doświadczenia z danymi, bardzo dobra znajomość SQL, praktyczna znajomość Python oraz Apache Airflow.