Senior Data Engineer - Remote Cloud Migration to GCP

your Jared; Kraków; Hybrid; PLN 180,000 - 280,000; Full time

Benefits offered by this job

Medicover health care

Dental care (Medicover)

Sports card (Medicover)

Life insurance

Retirement program

Certification access

Welfare programs

Job summary

your Jared poszukuje Senior Data Engineer do pracy przy migracji platformy danych z Cloudera/on-premise do Google Cloud Platform. Do obowiązków należy projektowanie, rozwój i optymalizacja rozwiązań danych w oparciu o GCP, a także utrzymanie pipeline’ów batch i streaming oraz ścisła współpraca z zespołami biznesowymi.

Wymagane jest 5–6 lat doświadczenia w Data Engineering, biegła znajomość GCP (Dataproc, Dataflow, BigQuery, Cloud Composer) i praktyczne umiejętności w ETL, Airflow oraz Terraform.

Qualifications

• Minimum 5–6 lat doświadczenia w Data Engineering lub Big Data.
• Dobra znajomość GCP (Dataproc, Dataflow, BigQuery, Cloud Composer).
• Doświadczenie w migracjach on-premise do chmury i pracy w projekcie międzynarodowym.

Responsibilities

• Udział w migracji platformy danych z Cloudera/on-premise do GCP.
• Projektowanie, rozwój i optymalizacja rozwiązań danych w chmurze GCP.
• Tworzenie i utrzymanie pipeline’ów danych (batch i streaming).
• Praca z usługami GCP: Dataproc, Dataflow, BigQuery, Cloud Composer.
• Analiza architektury, rekomendowanie rozwiązań, dbałość o skalowalność i koszty.

Skills

Data engineering

GCP Dataproc

GCP Dataflow

GCP BigQuery

GCP Cloud Composer

Python

Java

Apache Airflow

Terraform

Cloudera/Hadoop

Data governance

Tools

Dataproc

Dataflow

BigQuery

Cloud Composer

Apache Airflow

Git

Terraform

Job description

your Jared poszukuje Senior Data Engineer do pracy przy migracji platformy danych z Cloudera/on-premise do Google Cloud Platform. Do obowiązków należy projektowanie, rozwój i optymalizacja rozwiązań danych w oparciu o GCP, a także utrzymanie pipeline’ów batch i streaming oraz ścisła współpraca z zespołami biznesowymi.

Wymagane jest 5–6 lat doświadczenia w Data Engineering, biegła znajomość GCP (Dataproc, Dataflow, BigQuery, Cloud Composer) i praktyczne umiejętności w ETL, Airflow oraz Terraform.