Senior Data Engineer - GCP, BigQuery & Airflow (Remote)

HeadHR; Poland; Remote; PLN 180,000 - 260,000; Full time

Benefits offered by this job

Prywatna opieka zdrowotna i rehabilit

Dodatkowe dni wolne dla rodziców (6dni

Kafeteryjny program benefitów

Wewnętrzny program szkoleń

Job summary

HeadHR poszukuje Data Engineera do projektowania i rozwoju nowoczesnych rozwiązań danych w Google Cloud Platform. Doświadczenie w tworzeniu i utrzymaniu skalowalnych pipeline’ów danych i pracy z serwisami GCP będzie kluczowe.

Oczekujemy zaawansowanej znajomości Pythonu i SQL, BigQuery oraz architektury data engineering, a także umiejętności pracy z narzędziami takimi jak Cloud Run, Cloud Functions i Apache Airflow. Współpraca z zespołami międzydziałowymi i wsparcie projektów biznesowych.

Qualifications

• Wymagane doświadczenie w pracy z Google Cloud Platform i narzędziami ekosystemu GCP.

Responsibilities

• Projektowanie i rozwój pipeline’ów danych w środowisku GCP.
• Budowa i optymalizacja procesów ETL/ELT.
• Praca z hurtownią danych BigQuery oraz optymalizacja zapytań SQL.
• Tworzenie rozwiązań serverless z Cloud Run oraz Cloud Functions.
• Integracja danych z różnych źródeł i automatyzacja procesów.
• Orkiestracja workflow z użyciem Cloud Composer (Apache Airflow).
• Zarządzanie procesami inżynierii danych oraz Cloud Storage.
• Monitorowanie jakości danych i walidacja procesów przetwarzania.
• Współpraca z zespołami analitycznymi, developerskimi i biznesowymi.

Skills

Google Cloud Platform

BigQuery

Cloud Run

Cloud Functions

Cloud Storage

Cloud Composer

Apache Airflow

Python

SQL

ETL/ELT pipelines

Job description

HeadHR poszukuje Data Engineera do projektowania i rozwoju nowoczesnych rozwiązań danych w Google Cloud Platform. Doświadczenie w tworzeniu i utrzymaniu skalowalnych pipeline’ów danych i pracy z serwisami GCP będzie kluczowe.

Oczekujemy zaawansowanej znajomości Pythonu i SQL, BigQuery oraz architektury data engineering, a także umiejętności pracy z narzędziami takimi jak Cloud Run, Cloud Functions i Apache Airflow. Współpraca z zespołami międzydziałowymi i wsparcie projektów biznesowych.