Senior GCP Data Engineer - BigQuery, Data Lake & CI/CD

IT Squad; Warszawa; Hybrid; PLN 180,000 - 290,000; Full time

Job summary

IT Squad w Warszawie poszukuje doświadczonego inżyniera danych do projektowania i utrzymania wysokowydajnych pipeline'ów danych na Google Cloud, w tym BigQuery i Ab Initio. Dołączysz do zespołu specjalistów zajmujących się Data Lake, Data Warehouse i migracjami danych.

Wymagane minimum 5 lat doświadczenia, dobra znajomość SQL i tuningów, oraz umiejętność pracy z Data Scientists i software engineers. Pracujesz w trybie zdalnym lub hybrid, z lokalizacją w Warszawie.

Qualifications

• Minimum 5 lat doświadczenia w projektowaniu i wdrażaniu wysokowydajnych pipeline'ów danych (batch i streaming).
• Doświadczenie w budowie i utrzymaniu Data Lake i Data Warehouse na GCP.

Responsibilities

• Projektowanie, tworzenie i utrzymanie wysokowydajnych pipeline'ów danych (batch i streaming).
• Projektowanie rozwiązań chmurowych klasy enterprise w GCP (BigQuery, Data Lake/ DW).
• Udział w migracjach i transformacjach danych dla klientów.
• Współpraca z Data Scientists, Data Analysts i Software Engineers przy realizacji złożonych potrzeb związanych z danymi.
• Prowadzenie i wdrażanie rozwiązań DevOps, CI/CD oraz automatyzacja provisioning'u infrastruktury.

Skills

BigQuery

Ab Initio

SQL tuning

Cloud data platforms

Data pipelines

DevOps

CI/CD

Data Lake

Data Warehouse

Python/ETL scripting

Tools

BigQuery

Ab Initio

Job description

IT Squad w Warszawie poszukuje doświadczonego inżyniera danych do projektowania i utrzymania wysokowydajnych pipeline'ów danych na Google Cloud, w tym BigQuery i Ab Initio. Dołączysz do zespołu specjalistów zajmujących się Data Lake, Data Warehouse i migracjami danych.

Wymagane minimum 5 lat doświadczenia, dobra znajomość SQL i tuningów, oraz umiejętność pracy z Data Scientists i software engineers. Pracujesz w trybie zdalnym lub hybrid, z lokalizacją w Warszawie.