Data Architect

AgileEngine; Warszawa, Kraków, Poznań; On-site; PLN 400,000 - 640,000; Full time

Job summary

AgileEngine poszukuje doświadczonego architekta rozwiązań danych na GCP, który będzie prowadził projekt dużej platformy danych dla klienta z branży telekomunikacyjnej. Rola obejmuje projektowanie architektury lakehouse/medallion na BigQuery, Dataflow i Pub/Sub oraz skalowanie tysiące pipeline'ów i setki tysięcy tabel.

Będziesz niezależnym głosem technicznym obok architektów klienta, odpowiadać za migrację ze starych ETL, governance i katalogowanie danych, a także doradzać w migracjach legacy ETL

Qualifications

• Wymagane 10+ lat doświadczenia w architekturze danych i architekturze systemów enterprise.
• Praktyczne doświadczenie z architekturą platform danych na GCP (BigQuery, Dataflow, Pub/Sub, GCS) na skalę enterprise.
• Doświadczenie w projektowaniu architektur lakehouse/medallion (bronze/silver/gold).
• Doświadczenie w definiowaniu frameworków data governance (jakość danych, lineage, metadane, kontrola dostępu, katalogowanie).
• Doświadczenie w migracji legacy ETL do nowoczesnych architektur cloud-native.

Responsibilities

• Być niezależnym technicznym głosem obok architektów klienta i odpowiadać za strategię migracji.
• Definiować i utrzymywać governance danych, katalogowanie i metadane.
• Doradzać w migracji legacy ETL do architektur cloud-native.
• Projektować architekturę lakehouse/medallion na platformie GCP.
• Współpracować z klientem enterprise nad skalowalnymi rozwiązaniami danych.

Skills

Architektura danych

GCP architektura

Tools

BigQuery

Dataflow

Pub/Sub

GCS

Job description

Rola architekta rozwiązania przy budowie wielkoskalowej platformy danych na GCP dla klienta z branży telekomunikacyjnej — architektura lakehouse/medallion na BigQuery, Dataflow i Pub/Sub, obsługująca tysiące pipeline'ów i setki tysięcy tabel. Będziesz niezależnym głosem technicznym obok architektów klienta, odpowiadać za strategię migracji ze starych ETL-i oraz governance i katalogowanie danych. Uwaga: ogłoszenie urywa się w połowie zdania o wymiarze zatrudnienia ('starts part-time and sca...') — brak pełnej informacji, czy i kiedy rola przechodzi na pełny etat. Dla doświadczonego architekta danych, który lubi pracę z wymagającym klientem enterprise.

• 10+ lat doświadczenia w architekturze danych, architekturze rozwiązań lub architekturze systemów enterprise
• praktyczne doświadczenie w architekturze platform danych na GCP (BigQuery, Dataflow, Pub/Sub, GCS) w skali enterprise / multi-petabajtowej
• doświadczenie w projektowaniu architektur lakehouse lub medallion (warstwy bronze/silver/gold lub równoważne)
• doświadczenie w definiowaniu frameworków data governance (jakość danych, lineage, metadane, kontrola dostępu, katalogowanie)
• doświadczenie w doradzaniu lub prowadzeniu migracji legacy ETL do nowoczesnych architektur cloud-native