Middle Data Engineer: Cloud & BigQuery ETL Specialist

RITS; Warszawa; On-site; PLN 167,000 - 238,000; Full time

Job summary

RITS poszukuje Middle Data Engineer’a do pracy nad projektem z zakresu Data Engineering i migracji danych do Google Cloud Platform. Kandydat będzie pracować z BigQuery, Cloud Storage i Pub/Sub, a także prowadzić migracje z Oracle i środowisk on-prem do chmury.

Wymagane jest minimum 2 lata doświadczenia komercyjnego w projektowaniu procesów integracji danych oraz praktyczna znajomość GCP i SQL. Praca w modelu B2B na Warszawę z wizytami u klienta.

Qualifications

• Minimum 2 lata komercyjnego doświadczenia w projektowaniu i implementacji procesów integracji danych.
• Poziom Middle Data Engineer i praktyczna znajomość Google Cloud Platform (BigQuery, Cloud Storage, Pub/Sub).
• Doświadczenie z Oracle i dużymi wolumenami danych oraz z Informatica PowerCenter.
• Umiejętność projektowania i optymalizacji zapytań SQL oraz pracy z ETL/ELT.
• Znajomość Pythona do implementacji logiki przetwarzania danych.

Responsibilities

• Projektowanie i rozwój rozwiązań Data Engineering na Google Cloud Platform, z wykorzystaniem BigQuery, Cloud Storage i Pub/Sub.
• Migracja procesów z środowisk on-prem do GCP oraz przebudowa procesów przetwarzania danych.
• Projektowanie i rozwój batch i streaming procesów wraz z kontrolą jakości i obsługą błędów.
• Projektowanie struktur i modeli danych w BigQuery z uwzględnieniem wydajności i kosztów.
• Przygotowywanie testów jednostkowych i integracyjnych oraz dokumentacja techniczna.

Skills

BigQuery

SQL

Python

Tools

BigQuery

Cloud Storage

Pub/Sub

Oracle

Informatica PowerCenter

SQL

Python

ETL/ELT

CI/CD

DevOps

Job description

RITS poszukuje Middle Data Engineer’a do pracy nad projektem z zakresu Data Engineering i migracji danych do Google Cloud Platform. Kandydat będzie pracować z BigQuery, Cloud Storage i Pub/Sub, a także prowadzić migracje z Oracle i środowisk on-prem do chmury.

Wymagane jest minimum 2 lata doświadczenia komercyjnego w projektowaniu procesów integracji danych oraz praktyczna znajomość GCP i SQL. Praca w modelu B2B na Warszawę z wizytami u klienta.