Senior GCP Data Engineer

Scalo; Warszawa; Hybrid; PLN 180,000 - 240,000; Full time

Job summary

Scalo poszukuje doświadczonego Data Engineera specjalizującego się w Google Cloud Platform. Firma rozwija i utrzymuje rozwiązania do przetwarzania danych, projektuje potoki batch i streaming, pracuje z BigQuery, Dataflow, Dataproc, Composer oraz Cloud Storage.

Kandydat samodzielnie realizuje zadania i współpracuje z analitykami i architektami. Wymagane jest zaawansowane doświadczenie w GCP, Pythonie i SQL, a także praktyczna umiejętność projektowania i integracji systemów danych.

Qualifications

• Doświadczenie w projektowaniu i budowie rozwiązań chmurowych w GCP.
• Praktyczne doświadczenie w projektowaniu i implementacji systemów przetwarzania danych oraz integracji systemów.
• Bardzo dobra znajomość BigQuery, Dataproc, Composer (Airflow) oraz Cloud Storage.
• Bardzo dobra znajomość Python i SQL.
• Doświadczenie w pracy z potokami danych i procesami ich przetwarzania.
• Doświadczenie z Google Artifact Registry
• Współpraca hybrydowa z Warszawy

Responsibilities

• Projektowanie, implementacja i utrzymanie potoków danych w GCP.
• Współpraca z analitykami i architektami w zakresie architektury danych.
• Automatyzacja wdrożeń i utrzymanie jakości danych.

Skills

GCP architektura

BigQuery/Dataproc

Airflow/Composer

Python

SQL

Dane potoki

Tools

Terraform

GitHub

Artifact Registry

Cloud Storage

Job description

Rozwój i utrzymanie rozwiązań do przetwarzania danych w Google Cloud Platform — projektowanie potoków batch i streaming, praca z BigQuery, Dataflow, Dataproc, Composer (Airflow) i Cloud Storage, automatyzacja wdrożeń z Terraform i GitHub oraz udział w dyskusjach o architekturze platformy danych. To oferta dla doświadczonego Data Engineera z GCP, który samodzielnie realizuje zadania i współpracuje z analitykami i architektami.

• doświadczenie w projektowaniu i budowie rozwiązań chmurowych w Google Cloud Platform (GCP)


• praktyczne doświadczenie w projektowaniu i implementacji systemów przetwarzania danych oraz integracji systemów


• bardzo dobra znajomość BigQuery, Dataproc, Composer (Airflow) oraz Cloud Storage


• bardzo dobra znajomość Python i SQL


• doświadczenie w pracy z potokami danych i procesami ich przetwarzania


• doświadczenie z Google Artifact Registry


• współpraca hybrydowa z Warszawy