GCP Data Contracts Engineer

Be in IT to butikowa firma rekrutacyjna IT.; United States; Remote; USD 46,000 - 49,000; Full time

Benefits offered by this job

Prywatna opieka medyczna

Karta Multisport

Nowoczesny sprzęt

Job summary

Be in IT specjalizuje się w kompleksowej rekrutacji specjalistów IT. Obecnie poszukujemy GCP Data Contracts Engineer do długofalowej współpracy z międzynarodową firmą konsultingową, pracującą nad kontraktami danych w środowisku GCP.

Zakres obejmuje implementację i utrzymanie kontraktów danych, walidację schematów oraz integrację z procesami CI/CD. Mile widziane doświadczenie z narzędziami typu dbt, Dataform i Looker.

Qualifications

• Wymagane doświadczenie w Data Engineering, Data Governance i Data Quality w Google Cloud Platform.

Responsibilities

• Długofalowa współpraca z międzynarodową firmą konsultingową w obszarze IT.
• Implementacja i utrzymanie kontraktów danych (Data Contracts) w GCP zgodnie z specyfikacjami.
• Projektowanie i aktualizacja schematów danych oraz reguł walidacji w kontraktach danych.

Skills

Data engineering

Data governance

Data quality

SQL

GCP

Python

Spark

Kubernetes

BigQuery

Vertex AI

Tools

OpenAPI/JSON Schema

CI/CD

dbt

Dataform

Knowledge Catalog

Data Catalog

Terraform

Looker

Job description

Be in IT specjalizuje się w kompleksowej rekrutacji specjalistów IT dla polskich i międzynarodowych firm. Wspieramy klientów w pozyskiwaniu ekspertów z obszarów software development, AI, data, cloud, cybersecurity, ERP, CRM oraz zarządzania IT.
Stawiamy na znajomość technologii, przejrzystą komunikację i partnerskie podejście, dzięki którym skutecznie dopasowujemy kandydatów do potrzeb organizacji i realizowanych projektów.
Obecnie dla naszego klienta poszukujemy osoby na stanowisku: GCP Data Contracts Engineer.

Zakres obowiązków:

• Długofalowa współpraca z międzynarodową, topową firmą consultingową, świadczącą usługi IT dla dużych i średnich firm z różnorodnych sektorów. Projekt dla klienta z branży telekomunikacyjnej.
• Implementacja, wdrażanie i utrzymywanie kontraktów danych (Data Contracts) w środowisku GCP na podstawie uzgodnionych specyfikacji oraz przyjętej architektury i standardów.
• Implementacja i aktualizacja schematów danych oraz reguł walidacji w kontraktach danych zgodnie z wymaganiami jakościowymi uzgodnionymi z właścicielami danych i zespołami technicznymi.
• Implementacja automatycznej walidacji schematów i zgodności danych z kontraktami oraz współpraca przy integracji tych mechanizmów z procesami CI/CD.
• Tworzenie zapytań SQL na potrzeby analizy danych, weryfikacji wymagań jakościowych i identyfikowania niezgodności z kontraktami.
• Analiza, przetwarzanie i modelowanie danych na potrzeby definiowania oraz wdrażania kontraktów w rozwiązaniach hurtowni danych i Big Data.
• Współpraca z zespołami produktowymi, Data Engineering, BI oraz właścicielami danych przy uzgadnianiu wymagań, definiowaniu kontraktów i rozwiązywaniu wykrytych niezgodności.
• Udział w doborze narzędzi wspierających automatyzację kontraktów oraz doskonaleniu procesów ich tworzenia, aktualizowania i utrzymywania.

Oczekujemy:

• Kilka lat praktycznego doświadczenia w Data Engineering, Data Governance, Data Quality, analizie danych w obszarze Google Cloud Platform.
• Praktyczna znajomość zagadnień dotyczących obszaru Data Contracts (definiowanie Data Contracts, wymagań jakościowych) i narzędzi wspierających automatyzację kontraktów (np. OpenAPI/JSON Schema, narzędzia do CI/CD, QA danych).
• Doświadczenie w analizie, przetwarzaniu i modelowaniu danych, znajomość architektury rozwiązań Hurtowni Danych i Big Data.
• Zaawansowana umiejętność tworzenia zapytań SQL.
• Mile widziana dostępność ASAP; akceptowalny jest maksymalnie miesięczny okres wypowiedzenia ze skutkiem na koniec miesiąca.
• Mile widziane:
• Gotowość do pracy w modelu hybrydowym z biura w Warszawie.
• Znajomość standardu ODCS oraz znajomość ekosystemu GCP (Spark, Python, Kubernetes, BigQuery, Vertex AI, Terraform, Looker, Oracle).
• Doświadczenie z narzędziami zarządzania danymi, np.: dbt, Dataform (transformacja i dokumentacja danych), Knowledge Catalog (dawniej Dataplex), Data Catalog (zarządzanie ładem danych).
• Znajomość zagadnień z obszaru Data Governance i Data Quality.
• Długofalowa współpraca z wynagrodzeniem w przedziale130 - 140 PLNnetto/godz. + VAT.
• Wsparcie przy zakładaniu i prowadzeniu działalności gospodarczej, dla osób bez takiego doświadczenia.
• Sprawny proces rekrutacyjny - dwie rozmowy techniczne z managerami, online (każda maksymalnie po godzinie).
• Współpraca w pełni zdalna. Mile widziana gotowość do pracy hybrydowej z biura w Warszawie.
• Benefity - prywatna opieka medyczna, karta Multisport.
• Nowoczesny sprzęt zapewniany przez firmę, wraz z softem i konfiguracją.