Lider Platformy Danych w Chmurze GCP (Airflow, IaC)

DCV Technologies; Polska; Remote; PLN 180,000 - 240,000; Full time

Job summary

DCV Technologies szuka Lead Data Platform Engineer do budowy i rozwoju cloud-native platformy danych na GCP dla dużego marketplace'u e-commerce. Będziesz tworzyć narzędzia self-service, CLI i Data Product szablony, a także odpowiadać za Airflow (Cloud Composer) i infrastrukturę jako kod w Terraform.

Wymagane jest doskonałe doświadczenie w Pythonie, znajomość GCP/BigQuery, Airflow oraz praktyka z GitOps i PySpark. Praca w dynamicznym środowisku o szybkim tempie zmian.

Qualifications

• Bardzo dobre komercyjne doświadczenie w Pythonie.
• Praktyczne doświadczenie z Google Cloud Platform (GCP) i BigQuery.
• Doświadczenie z Apache Airflow (Cloud Composer).
• Doświadczenie w budowie platform engineering, developer tooling lub rozwiązań self-service.
• Znajomość Infrastructure as Code i Terraform.
• Doświadczenie z GitOps i nowoczesnymi praktykami dostarczania oprogramowania.
• Doświadczenie z PySpark i/lub Apache Spark.
• Znajomość języka polskiego.

Responsibilities

• Budowa i rozwijanie cloud-native platformy danych na GCP dla marketplace'u e-commerce.
• Zarządzanie platformą Airflow (Cloud Composer) oraz infrastrukturą jako kod w Terraform.
• Wdrażanie narzędzi self-service, CLI, Data Product templates i GitOps.
• Praca w fast-growing environment z wysoką dynamiką zmian i presją na dostarczanie.

Skills

Python

PySpark

Spark

Self-service platform

GitOps

Tools

GCP

BigQuery

Airflow/Cloud Composer

Terraform

Job description

DCV Technologies szuka Lead Data Platform Engineer do budowy i rozwoju cloud-native platformy danych na GCP dla dużego marketplace'u e-commerce. Będziesz tworzyć narzędzia self-service, CLI i Data Product szablony, a także odpowiadać za Airflow (Cloud Composer) i infrastrukturę jako kod w Terraform.

Wymagane jest doskonałe doświadczenie w Pythonie, znajomość GCP/BigQuery, Airflow oraz praktyka z GitOps i PySpark. Praca w dynamicznym środowisku o szybkim tempie zmian.