Senior Data Engineer – GCP/BigQuery & Scalable Pipelines

DGTL Performance; Valbonne; Sur place; EUR 35 000 - 40 000; Plein temps

Résumé du poste

DGTL Performance recherche un Data Engineer GCP BigQuery F/H pour contribuer à une plateforme de données centralisée alimentant des modèles ML dans un grand groupe du secteur aéronautique.

Vous travaillerez sur l ingestion, la transformation et l orchestration de flux massifs via Kafka, dans un environnement cloud-native Google Cloud Platform, avec Terraform et GitHub Actions et une méthodologie Agile.

Qualifications

• Expérience confirmée (minimum 5 ans) en Data Engineer ou rôle équivalent.
• Maîtrise solide de Google Cloud Platform, BigQuery/DataFlow/DataProc.
• Compétences avancées en Scala et/ou Java, code production robuste.
• Expérience démontrable sur Hadoop, Spark ou technologies de calcul distribué.
• Connaissance pratique de Kafka et de streaming événementiel.
• Expérience avec Terraform et outils IaC.
• Maîtrise GitHub Actions ou CI/CD équivalents.
• Anglais courant (au moins B2) pour échanges techniques.

Responsabilités

• Concevoir et développer des pipelines de données performants sur GCP (DataProc, DataFlow, BigQuery, BigTable).
• Implémenter des transformations de données en Scala/Java.
• Assurer l'intégration et l'orchestration de flux via Kafka, de l'ingestion à la production.
• Optimiser les requêtes BigQuery pour des volumes massifs et évolutifs.
• Automatiser les déploiements via Terraform et GitHub Actions (CI/CD).
• Collaborer avec les équipes ML et les parties prenantes métier pour valider les livrables.
• Participer aux revues de code, documenter et partager les bonnes pratiques.

Connaissances

GCP BigQuery

Scala/Java

Kafka

Terraform

GitHub Actions

Anglais B2

Outils

GTM

Hadoop

Spark

Description du poste

DGTL Performance recherche un Data Engineer GCP BigQuery F/H pour contribuer à une plateforme de données centralisée alimentant des modèles ML dans un grand groupe du secteur aéronautique.

Vous travaillerez sur l ingestion, la transformation et l orchestration de flux massifs via Kafka, dans un environnement cloud-native Google Cloud Platform, avec Terraform et GitHub Actions et une méthodologie Agile.