Data Engineer - GCP & BigQuery Pipelines

Davidson Consulting; France; Hybride; EUR 60 000 - 95 000; Plein temps

Résumé du poste

Davidson Consulting est à la recherche d’un Data Engineer pour intervenir sur des projets Data dans un cadre international. Vous concevrez et maintiendrez des pipelines ETL/ELT sur Google Cloud Platform, tout en développant des data warehouses et des data lakes scalables sur BigQuery et en optimisant les coûts et le schéma.

Vous travaillerez en équipe avec des professionnels passionnés, utiliserez des outils modernes (SQL, Python, Scala, Kafka, Pub/Sub, Airflow, dbt) et participerez au

Qualifications

• BigQuery, Python, Scala, Kafka et Pub/Sub dans un contexte GCP n’ont plus de secrets pour toi.
• Tu parles anglais couramment et tu apprécies le Tea Time.
• Tu aimes le travail en équipe et la technique.

Responsabilités

• Concevoir et maintenir des pipelines de données ETL/ELT sur Google Cloud Platform (GCP).
• Concevoir des data warehouses et data lakes scalables sur BigQuery, optimiser les schémas et partitions.
• Optimiser les requêtes SQL, le partitionnement et réduire les coûts BigQuery/Dataflow.
• Assurer le versionning et le déploiement continu via Terraform, Cloud Build et GitLab CI.
• Nettoyer, normaliser et monitorer les données avec tests.

Connaissances

BigQuery

Python

Scala

Kafka

Pub/Sub

SQL

GCP

ETL/ELT pipelines

Airflow

dbt

Terraform

Cloud Build

GitLab CI

Outils

Terraform

Cloud Build

GitLab CI

Airflow

dbt

Description du poste

Davidson Consulting est à la recherche d’un Data Engineer pour intervenir sur des projets Data dans un cadre international. Vous concevrez et maintiendrez des pipelines ETL/ELT sur Google Cloud Platform, tout en développant des data warehouses et des data lakes scalables sur BigQuery et en optimisant les coûts et le schéma.

Vous travaillerez en équipe avec des professionnels passionnés, utiliserez des outils modernes (SQL, Python, Scala, Kafka, Pub/Sub, Airflow, dbt) et participerez au