Data Engineer (GCP)

Team Connect

Warszawa

On-site

PLN 180,000 - 280,000

Full time

4 days ago

Be an early applicant

Application generator

Stand out for this role — generate a tailored resume and cover letter in about a minute.

Get past ATS filters

Job summary

Wymagane jest doświadczenie z projektowaniem batch i streaming pipelines, znajomość SQL i Python oraz praktyki w CI/CD w modelu DevOps.

Qualifications

Projektowanie i rozwój rozwiązań Data Engineering na GCP (BigQuery, Cloud Storage, Pub/Sub).
Migracja procesów z Oracle/on-premise do GCP.
Projektowanie batch i streaming z QA i obsługą błędów.
Migracja procesów Informatica PowerCenter do chmury.
SQL na poziomie umożliwiającym strojenie zapytań i analizę planów wykonania.
Python w transformacjach i integracji danych.
DevOps CI/CD w repozytorium kodu.

Skills

SQL

Python

DevOps

GCP

Data pipelines

Tools

Informatica PowerCenter

CI/CD pipelines

Job description

Team Connect szuka Data Engineera do projektu w branży bankowej. Będziesz projektować i rozwijać rozwiązania Data Engineering na GCP (BigQuery, Cloud Storage, Pub/Sub), migrować procesy z Oracle/on-premise oraz przebudowywać procesy Informatica PowerCenter do rozwiązań docelowych w chmurze. To rola dla osoby, która łączy pracę z pipeline'ami batch i streaming z optymalizacją kosztów i wydajności w BigQuery.

doświadczenie w projektowaniu i rozwoju rozwiązań Data Engineering na GCP (BigQuery, Cloud Storage, Pub/Sub)
doświadczenie w migracji procesów przetwarzania danych z Oracle/on-premise do GCP
doświadczenie w projektowaniu procesów batch i streaming z mechanizmami kontroli jakości i obsługi błędów
doświadczenie w analizie i migracji procesów Informatica PowerCenter
znajomość SQL na poziomie umożliwiającym strojenie zapytań i analizę planów wykonania
znajomość Python w kontekście transformacji i integracji danych
doświadczenie w pracy z repozytorium kodu i procesami CI/CD w modelu DevOps