Data Engineer: Big Data on GCP, Kafka & Spark

ALTEN; Boulogne-Billancourt; Sur place; EUR 45 000 - 55 000; Plein temps

Résumé du poste

ALTEN, la Maison des ingénieurs, recrute un Data Engineer passionné par le Big Data pour concevoir et déployer des solutions data à grande échelle. Vous concevrez pipelines robustes, travaillerez sur des architectures distribuées et optimiserez les traitements sur GCP, en collaboration avec Data Science et DevOps.

Profil demandé: minimum 5 ans d’expérience en Data/Data Engineer, maîtrise de GCP, Kafka, Spark et Cassandra, et connaissance d’outils comme Airflow, Docker et Kubernetes.

Qualifications

• Maîtrise de GCP (BigQuery, Pub/Sub, Dataflow).
• Expérience confirmée avec Apache Kafka (streaming, connecteurs).
• Expertise en Spark (PySpark ou Scala).
• Connaissance de Scala ou Python pour le développement.
• Expérience avec Cassandra (modélisation, requêtes, optimisation).

Responsabilités

• Concevoir, développer et maintenir des pipelines data robustes et scalables.
• Travailler sur des architectures distribuées (Kafka, Spark, Cassandra).
• Optimiser les traitements de données sur GCP (BigQuery, Dataflow, Dataproc, etc.).
• Collaborer avec les équipes Data Science et DevOps pour industrialiser les solutions.
• Assurer la performance, la fiabilité et la sécurité des infrastructures data.
• Expérience: Minimum 5 ans en Data Engineer ou Big Data Engineer.

Connaissances

GCP

Kafka

Spark

Python/Scala

Cassandra

Outils

Airflow

Docker

Kubernetes

Prometheus

Grafana

Description du poste

ALTEN, la Maison des ingénieurs, recrute un Data Engineer passionné par le Big Data pour concevoir et déployer des solutions data à grande échelle. Vous concevrez pipelines robustes, travaillerez sur des architectures distribuées et optimiserez les traitements sur GCP, en collaboration avec Data Science et DevOps.

Profil demandé: minimum 5 ans d’expérience en Data/Data Engineer, maîtrise de GCP, Kafka, Spark et Cassandra, et connaissance d’outils comme Airflow, Docker et Kubernetes.