Data Engineer: Data Quality in GCP (BigQuery, dbt Core)

Arche Solutions; Polska; Hybrid; PLN 120,000 - 180,000; Full time

Job summary

Arche Solutions szuka Data Engineera z doświadczeniem w chmurze i SQL, aby migrować rozwiązanie monitorujące jakość danych do środowiska GCP. Będziesz projektować i rozwijać pipeline'y danych, implementować mechanizmy Data Quality w dbt Core oraz przygotowywać mapowania między rozwiązaniami.

Praca wymaga ścisłej współpracy w zespole interdyscyplinarnym. Stanowisko obejmuje projektowanie i utrzymanie ETL/ELT, migracje danych oraz monitorowanie jakości danych.

Qualifications

• Co najmniej 4 lata doświadczenia na stanowisku Data Engineer
• Doświadczenie w budowaniu i utrzymywaniu pipeline'ów danych
• Doświadczenie w projektowaniu i implementacji procesów ETL/ELT
• Doświadczenie w migracji, transformacji i przetwarzaniu danych
• Znajomość zagadnień związanych z Data Quality, monitoringiem i walidacją danych
• Praktyczna znajomość GCP i Google BigQuery
• Doświadczenie z dbt Core
• Umiejętność współpracy w zespołach interdyscyplinarnych

Responsibilities

• Projektowanie i rozwijanie pipeline'ów danych w chmurze GCP
• Budowa i utrzymanie procesów ETL/ELT
• Implementacja mechanizmów Data Quality i walidacji danych
• Przygotowywanie mapowań między rozwiązaniami oraz budowa repozytoriów do monitorowania wyników kontroli

Skills

Data engineering

SQL

ETL/ELT

Data quality

Monitoring

Cloud collaboration

Tools

Google BigQuery

dbt Core

GCP

Job description

Arche Solutions szuka Data Engineera z doświadczeniem w chmurze i SQL, aby migrować rozwiązanie monitorujące jakość danych do środowiska GCP. Będziesz projektować i rozwijać pipeline'y danych, implementować mechanizmy Data Quality w dbt Core oraz przygotowywać mapowania między rozwiązaniami.

Praca wymaga ścisłej współpracy w zespole interdyscyplinarnym. Stanowisko obejmuje projektowanie i utrzymanie ETL/ELT, migracje danych oraz monitorowanie jakości danych.