Data Engineer GCP: Pipelines, BigQuery & Data Lakes

Davidson consulting; Strasbourg; Sur place; EUR 55 000 - 75 000; Plein temps

Résumé du poste

Davidson consulting recherche un Data Engineer pour concevoir et optimiser des pipelines de données sur Google Cloud Platform. Vous participerez à l’élaboration d’architectures Data Centrics et à la livraison de projets data, en étroite collaboration avec les équipes techniques et métiers.

Vous maîtrisez BigQuery, Python et Scala, avec une expérience sur Kafka et Pub/Sub. L’anglais opérationnel et l’esprit d’équipe seront des atouts majeurs pour ce poste basé à Strasbourg.

Qualifications

• Maîtrise des concepts de pipelines ETL/ELT sur GCP et data warehousing.
• Capacité à travailler en équipe et à communiquer en français et anglais.
• Goût pour les technologies et la résolution de problèmes data.

Responsabilités

• Concevoir, développer et maintenir des pipelines de données ETL/ELT sur GCP.
• Concevoir des data warehouses et data lakes scalables sur BigQuery.
• Optimiser requêtes SQL, partitionnement et coûts BigQuery/Dataflow.
• Versionning (Git) et déploiement via Terraform, Cloud Build, GitLab CI.
• Nettoyage, normalisation et tests; mise en place de monitoring des données.
• Travailler avec les équipes sur l’architecture data et les projets clients.

Connaissances

BigQuery

Python

Scala

Kafka

Pub/Sub

GCP

Anglais courant

Esprit d'équipe

Technicité

Outils

BigQuery

Dataflow

Dataproc

Cloud Composer

Pub/Sub

Cloud Storage

Kafka

Description du poste

Davidson consulting recherche un Data Engineer pour concevoir et optimiser des pipelines de données sur Google Cloud Platform. Vous participerez à l’élaboration d’architectures Data Centrics et à la livraison de projets data, en étroite collaboration avec les équipes techniques et métiers.

Vous maîtrisez BigQuery, Python et Scala, avec une expérience sur Kafka et Pub/Sub. L’anglais opérationnel et l’esprit d’équipe seront des atouts majeurs pour ce poste basé à Strasbourg.