GCP Data Engineer: BigQuery & Cloud Migration Expert

B2B.NET S.A.; Warszawa; Presencial; PLN 150.000 - 190.000; Jornada completa

Descripción de la vacante

B2B.NET S.A. poszukuje do zespołu inżyniera danych do projektu migracji i rozwoju procesów przetwarzania danych w środowisku Google Cloud Platform. Do obowiązków należy projektowanie i rozwój rozwiązań w GCP, migracja danych z Oracle/on-premise oraz rozwój procesów batch i streaming.

Wymagane doświadczenie z GCP, BigQuery i SQL. Praca obejmuje optymalizację zapytań i pracę z dużymi wolumenami danych, a także ETL w Informatica PowerCenter.

Formación

• Minimum 2 lata komercyjnego doświadczenia w integracji lub przetwarzaniu danych.
• Praktyczne doświadczenie z Google Cloud Platform (GCP).
• Bardzo dobra znajomość BigQuery.
• Doświadczenie z Oracle i PowerCenter.
• Bardzo dobra znajomość SQL i pracy z dużymi wolumenami.
• Znajomość Python w transformacji danych.
• Znajomość ETL w Informatica PowerCenter.

Responsabilidades

• Projektowanie i rozwój rozwiązań Data Engineering w GCP.
• Migracja i przebudowa procesów przetwarzania danych z Oracle/on-premise do GCP.
• Projektowanie i rozwój procesów batch oraz streaming.
• Projektowanie struktur i modeli danych w BigQuery.
• Tworzenie i optymalizacja zapytań SQL dla dużych wolumenów danych.
• Analiza i modyfikacja procesów ETL w Informatica PowerCenter.
• Implementacja transformacji, walidacji i integracji danych.
• Przygotowywanie testów jednostkowych i integracyjnych.
• Diagnozowanie problemów związanych z przetwarzaniem i jakością danych.
• Tworzenie i aktualizacja dokumentacji technicznej.

Conocimientos

GCP

BigQuery

Cloud Storage

Pub/Sub

SQL

Python

Informatica PowerCenter

Herramientas

Oracle

Descripción del empleo

B2B.NET S.A. poszukuje do zespołu inżyniera danych do projektu migracji i rozwoju procesów przetwarzania danych w środowisku Google Cloud Platform. Do obowiązków należy projektowanie i rozwój rozwiązań w GCP, migracja danych z Oracle/on-premise oraz rozwój procesów batch i streaming.

Wymagane doświadczenie z GCP, BigQuery i SQL. Praca obejmuje optymalizację zapytań i pracę z dużymi wolumenami danych, a także ETL w Informatica PowerCenter.