GCP Data Contracts Engineer

Be in IT to butikowa firma rekrutacyjna IT.; Województwo mazowieckie; Remote; PLN 179,000 - 193,000; Full time

Benefits offered by this job

Prywatna opieka medyczna

Karta Multisport

Nowoczesny sprzęt i konfiguracja

Job summary

Be in IT poszukuje specjalisty GCP Data Contracts Engineer do długofalowej współpracy z międzynarodową firmą consultingową. Rola obejmuje implementację kontraktów danych w środowisku GCP, aktualizację schematów i walidację danych zgodnie z ustalonymi standardami.

Wymagana jest praktyczna znajomość Data Contracts, automatyzacji QA danych oraz narzędzi takich jak dbt, Dataform, BigQuery i Vertex AI. Praca zdalna, preferowany nocny/poranny kontakt z Warszawą w modelu hybrydowym.

Qualifications

• Kilka lat praktycznego doświadczenia w Data Engineering i Data Governance.

Responsibilities

• Długofalowa współpraca z topową firmą consultingową w zakresie usług IT.
• Implementacja, wdrażanie i utrzymywanie Data Contracts w GCP zgodnie z specyfikacjami.
• Aktualizacja schematów danych i reguł walidacji w kontraktach danych.
• Automatyczna walidacja schematów i zgodności danych z kontraktami w CI/CD.
• Tworzenie zapytań SQL do analizy danych i identyfikowania niezgodności.
• Analiza, przetwarzanie i modelowanie danych dla hurtowni danych i Big Data.
• Współpraca z zespołami produktowymi i właścicielami danych przy wymaganiach.
• Wspieranie doboru narzędzi do automatyzacji kontraktów i procesów ich utrzymania.

Skills

Data Engineering

Data Governance

Data Quality

SQL

Analytical thinking

Tools

dbt

Dataform

Knowledge Catalog

Data Catalog

BigQuery

Vertex AI

Terraform

Looker

Spark

Python

Kubernetes

Oracle

Job description

Be in IT specjalizuje się w kompleksowej rekrutacji specjalistów IT dla polskich i międzynarodowych firm. Wspieramy klientów w pozyskiwaniu ekspertów z obszarów software development, AI, data, cloud, cybersecurity, ERP, CRM oraz zarządzania IT.

Stawiamy na znajomość technologii, przejrzystą komunikację i partnerskie podejście, dzięki którym skutecznie dopasowujemy kandydatów do potrzeb organizacji i realizowanych projektów.

Obecnie dla naszego klienta poszukujemy osoby na stanowisko: GCP Data Contracts Engineer.

Zakres obowiązków:

• Długofalowa współpraca z międzynarodową, topową firmą consultingową, świadczącą usługi IT dla dużych i średnich firm z różnorodnych sektorów. Projekt dla klienta z branży telekomunikacyjnej.
• Implementacja, wdrażanie i utrzymywanie kontraktów danych (Data Contracts) w środowisku GCP na podstawie uzgodnionych specyfikacji oraz przyjętej architektury i standardów.
• Implementacja i aktualizacja schematów danych oraz reguł walidacji w kontraktach danych zgodnie z wymaganiami jakościowymi uzgodnionymi z właścicielami danych i zespołami technicznymi.
• Implementacja automatycznej walidacji schematów i zgodności danych z kontraktami oraz współpraca przy integracji tych mechanizmów z procesami CI/CD.
• Tworzenie zapytań SQL na potrzeby analizy danych, weryfikacji wymagań jakościowych i identyfikowania niezgodności z kontraktami.
• Analiza, przetwarzanie i modelowanie danych na potrzeby definiowania oraz wdrażania kontraktów w rozwiązaniach hurtowni danych i Big Data.
• Współpraca z zespołami produktowymi, Data Engineering, BI oraz właścicielami danych przy uzgadnianiu wymagań, definiowaniu kontraktów i rozwiązywaniu wykrytych niezgodności.
• Udział w doborze narzędzi wspierających automatyzację kontraktów oraz doskonaleniu procesów ich tworzenia, aktualizowania i utrzymywania.

Oczekujemy:

• Kilka lat praktycznego doświadczenia w Data Engineering, Data Governance, Data Quality, analizie danych w obszarze Google Cloud Platform.
• Praktyczna znajomość zagadnień dotyczących obszaru Data Contracts (definiowanie Data Contracts, wymagań jakościowych) i narzędzi wspierających automatyzację kontraktów (np. OpenAPI/JSON Schema, narzędzia do CI/CD, QA danych).
• Doświadczenie w analizie, przetwarzaniu i modelowaniu danych, znajomość architektury rozwiązań Hurtowni Danych i Big Data.
• Zaawansowana umiejętność tworzenia zapytań SQL.
• Mile widziana dostępność ASAP; akceptowalny jest maksymalnie miesięczny okres wypowiedzenia ze skutkiem na koniec miesiąca.

Mile widziane:

• Gotowość do pracy w modelu hybrydowym z biura w Warszawie.
• Znajomość standardu ODCS oraz znajomość ekosystemu GCP (Spark, Python, Kubernetes, BigQuery, Vertex AI, Terraform, Looker, Oracle).
• Doświadczenie z narzędziami zarządzania danymi, np.: dbt, Dataform (transformacja i dokumentacja danych), Knowledge Catalog (dawniej Dataplex), Data Catalog (zarządzanie ładem danych).
• Znajomość zagadnień z obszaru Data Governance i Data Quality.

Oferujemy:

• Długofalowa współpraca z wynagrodzeniem w przedziale130 - 140 PLNnetto/godz. + VAT.
• Wsparcie przy zakładaniu i prowadzeniu działalności gospodarczej, dla osób bez takiego doświadczenia.
• Sprawny proces rekrutacyjny - dwie rozmowy techniczne z managerami, online (każda maksymalnie po godzinie).

Współpraca w pełni zdalna. Mile widziana gotowość do pracy hybrydowej z biura w Warszawie.

• Benefity - prywatna opieka medyczna, karta Multisport.
• Nowoczesny sprzęt zapewniany przez firmę, wraz z softem i konfiguracją.