GCP Data Engineer

emagine Polska; Warszawa; Hybrid; PLN 170,000 - 243,000; Full time

Job summary

emagine Polska poszukuje Senior Data Engineer / BigQuery Developer, który dołączy do zespołu odpowiedzialnego za strategię transformacji danych i projektowanie rozwiązań w Google Cloud Platform.

Zakres obowiązków obejmuje tworzenie i rozwój rozwiązań GCP, projektowanie procesów przetwarzania danych, budowę hurtowni danych i datamartów, pracę z BigQuery, Pythona i SQL, oraz współpracę z architektami i biznesem.

Qualifications

• Minimum 4–5 lat doświadczenia w Data Engineering.
• Bardzo dobra znajomość SQL.
• Doświadczenie z Google Cloud Platform.
• Praktyczna znajomość BigQuery.
• Dobra znajomość Pythona.
• Doświadczenie w projektach przetwarzania dużych wolumenów danych.
• Znajomość hurtowni danych.
• Umiejętność pracy w środowisku Agile.

Responsibilities

• Tworzenie i rozwój rozwiązań opartych o Google Cloud Platform.
• Projektowanie i implementacja procesów przetwarzania danych.
• Budowa i rozwój hurtowni danych oraz datamartów.
• Tworzenie rozwiązań z wykorzystaniem BigQuery.
• Pisanie i optymalizacja skryptów SQL.
• Tworzenie rozwiązań w Pythonie wspierających przetwarzanie danych.
• Współpraca z architektami, analitykami danych oraz biznesem.
• Udział w migracji i transformacji danych do nowego środowiska danych.

Skills

SQL

Python

Agile

Data Modeling

Tools

Google Cloud Platform

BigQuery

Job description

OGÓLNE INFORMACJE:

• Branża: finansowa
• Lokalizacja: praca hybrydowa (1x w miesiącu z biura w Warszawie)
• Stawka: do 150 PLN/h netto+VAT
• Forma współpracy: B2B - długofalowa współpraca

Podsumowanie: Rola Senior Data Engineer / BigQuery Developer koncentruje się na udział w strategii transformacji danych, skupiając się na projektowaniu i wdrażaniu rozwiązań przetwarzania danych w Google Cloud Platform.

Obowiązki:

• Tworzenie i rozwój rozwiązań opartych o Google Cloud Platform.
• Projektowanie oraz implementacja procesów przetwarzania danych.
• Budowa i rozwój hurtowni danych oraz datamartów.
• Tworzenie rozwiązań wykorzystujących BigQuery.
• Pisanie i optymalizacja skryptów SQL.
• Tworzenie rozwiązań w Pythonie wspierających przetwarzanie danych.
• Współpraca z architektami, analitykami danych oraz biznesem.
• Udział w migracji i transformacji danych do nowego środowiska danych.

Wymagania:

• Minimum 4-5 lat doświadczenia w obszarze Data Engineering.
• Bardzo dobra znajomość SQL.
• Doświadczenie w pracy z Google Cloud Platform.
• Praktyczna znajomość BigQuery.
• Dobra znajomość Python.
• Doświadczenie w projektach związanych z przetwarzaniem dużych wolumenów danych.
• Znajomość zagadnień związanych z hurtowniami danych.
• Umiejętność pracy w środowisku Agile.

Mile widziane:

• Doświadczenie w sektorze bankowym lub finansowym.
• Znajomość Data Lake / Data Warehouse.
• Znajomość Data Governance.
• Doświadczenie w migracjach danych.
• Znajomość CI/CD dla rozwiązań danych.
• Doświadczenie z innymi usługami GCP (Cloud Storage, Dataflow, Composer, Dataproc itp.).