GCP Data Contracts Engineer

Traffit; Warszawa; Remote; PLN 179.000 - 193.000; Vollzeit

Benefits dieser Stelle

Prywatna opieka medyczna

Karta Multisport

Nowoczesny sprzęt

Zusammenfassung

Traffit poszukuje specjalisty Data Contracts Engineer. To długoterminowa współpraca z międzynarodową firmą consultingową, świadczącą usługi IT dla dużych i średnich firm, z możliwością pracy zdalnej.

Zakres obejmuje implementację i utrzymanie kontraktów danych w GCP, walidację schematów oraz automatyczną walidację danych; praca nad CI/CD. Wymagana jest praktyczna znajomość Data Contracts, OpenAPI/JSON Schema, SQL, Data Governance i narzędzi typu dbt, Dataform, Data Catalog, oraz ekosystem GCP.

Qualifikationen

• Doświadczenie w Data Engineering, Data Governance i Data Quality w GCP.
• Znajomość Data Contracts (definiowanie i walidacja) i narzędzi CI/CD.
• Doświadczenie w analizie, przetwarzaniu i modelowaniu danych w Hurtowniach Danych i Big Data.
• Znajomość SQL i zaawansowane zapytania.
• Gotowość do pracy zdalnej, z opcją hybrydy w Warszawie.

Aufgaben

• Długofalowa współpraca z międzynarodową firmą consultingową świadczącą usługi IT.
• Implementacja, wdrażanie i utrzymywanie kontraktów danych w GCP.
• Implementacja i aktualizacja schematów danych oraz reguł walidacji.
• Automatyczna walidacja danych i integracja z CI/CD.
• Tworzenie zapytań SQL i analiza danych.
• Współpraca z zespołami produktowymi i właścicielami danych.
• Dobór narzędzi wspierających automatyzację kontraktów.

Kenntnisse

Data Contracts

GCP

SQL

Data Governance

Data Quality

OpenAPI/JSON Schema

CI/CD

Data Modeling

BigQuery

Looker

Python

Kubernetes

Tools

dbt

Dataform

Knowledge Catalog

Data Catalog

Jobbeschreibung

Be in IT specjalizuje się w kompleksowej rekrutacji specjalistów IT dla polskich i międzynarodowych firm. Wspieramy klientów w pozyskiwaniu ekspertów z obszarów software development, AI, data, cloud, cybersecurity, ERP, CRM oraz zarządzania IT.
Stawiamy na znajomość technologii, przejrzystą komunikację i partnerskie podejście, dzięki którym skutecznie dopasowujemy kandydatów do potrzeb organizacji i realizowanych projektów.
Obecnie dla naszego klienta poszukujemy osoby na stanowisku: GCP Data Contracts Engineer.

Zakres obowiązków:

• Długofalowa współpraca z międzynarodową, topową firmą consultingową, świadczącą usługi IT dla dużych i średnich firm z różnorodnych sektorów. Projekt dla klienta z branży telekomunikacyjnej.
• Implementacja, wdrażanie i utrzymywanie kontraktów danych (Data Contracts) w środowisku GCP na podstawie uzgodnionych specyfikacji oraz przyjętej architektury i standardów.
• Implementacja i aktualizacja schematów danych oraz reguł walidacji w kontraktach danych zgodnie z wymaganiami jakościowymi uzgodnionymi z właścicielami danych i zespołami technicznymi.
• Implementacja automatycznej walidacji schematów i zgodności danych z kontraktami oraz współpraca przy integracji tych mechanizmów z procesami CI/CD.
• Tworzenie zapytań SQL na potrzeby analizy danych, weryfikacji wymagań jakościowych i identyfikowania niezgodności z kontraktami.
• Analiza, przetwarzanie i modelowanie danych na potrzeby definiowania oraz wdrażania kontraktów w rozwiązaniach hurtowni danych i Big Data.
• Współpraca z zespołami produktowymi, Data Engineering, BI oraz właścicielami danych przy uzgadnianiu wymagań, definiowaniu kontraktów i rozwiązywaniu wykrytych niezgodności.
• Udział w doborze narzędzi wspierających automatyzację kontraktów oraz doskonaleniu procesów ich tworzenia, aktualizowania i utrzymywania.

Oczekujemy:

• Kilka lat praktycznego doświadczenia w Data Engineering, Data Governance, Data Quality, analizie danych w obszarze Google Cloud Platform.
• Praktyczna znajomość zagadnień dotyczących obszaru Data Contracts (definiowanie Data Contracts, wymagań jakościowych) i narzędzi wspierających automatyzację kontraktów (np. OpenAPI/JSON Schema, narzędzia do CI/CD, QA danych).
• Doświadczenie w analizie, przetwarzaniu i modelowaniu danych, znajomość architektury rozwiązań Hurtowni Danych i Big Data.
• Zaawansowana umiejętność tworzenia zapytań SQL.
• Mile widziana dostępność ASAP; akceptowalny jest maksymalnie miesięczny okres wypowiedzenia ze skutkiem na koniec miesiąca.
• Mile widziane:
• Gotowość do pracy w modelu hybrydowym z biura w Warszawie.
• Znajomość standardu ODCS oraz znajomość ekosystemu GCP (Spark, Python, Kubernetes, BigQuery, Vertex AI, Terraform, Looker, Oracle).
• Doświadczenie z narzędziami zarządzania danymi, np.: dbt, Dataform (transformacja i dokumentacja danych), Knowledge Catalog (dawniej Dataplex), Data Catalog (zarządzanie ładem danych).
• Znajomość zagadnień z obszaru Data Governance i Data Quality.
• Długofalowa współpraca z wynagrodzeniem w przedziale130 - 140 PLNnetto/godz. + VAT.
• Wsparcie przy zakładaniu i prowadzeniu działalności gospodarczej, dla osób bez takiego doświadczenia.
• Sprawny proces rekrutacyjny - dwie rozmowy techniczne z managerami, online (każda maksymalnie po godzinie).
• Współpraca w pełni zdalna. Mile widziana gotowość do pracy hybrydowej z biura w Warszawie.
• Benefity - prywatna opieka medyczna, karta Multisport.
• Nowoczesny sprzęt zapewniany przez firmę, wraz z softem i konfiguracją.