Senior Data Engineer – GCP, Kafka & Spark

ALTEN; Île-de-France; Sur place; EUR 65 000 - 95 000; Plein temps

Avantages offerts par ce poste

Prometheus Grafana

Airflow

Docker

Kubernetes

CI/CD IaC

Résumé du poste

ALTEN, la Maison des ingénieurs, recrute un Data Engineer passionné par le Big Data et les architectures distribuées pour concevoir, déployer et optimiser des solutions data à grande échelle.

Vous concevrez et maintiendrez des pipelines data robustes sur GCP (BigQuery, Dataflow) et travaillerez avec Kafka, Spark et Cassandra. Collaboration avec Data Science et DevOps, veillant à performance et sécurité des environnements.

Qualifications

• Minimum 5 années d’expérience en Data Engineering ou Big Data Engineering.
• Maîtrise de GCP et ses services (BigQuery, Pub/Sub, Dataflow).
• Expérience confirmée avec Apache Kafka et Spark (PySpark/Scala).
• Bonne connaissance de Scala ou Python pour le développement.
• Expérience avec Cassandra et modélisation de données.

Responsabilités

• Concevoir, développer et maintenir des pipelines data robustes et scalables.
• Travailler sur des architectures distribuées (Kafka, Spark, Cassandra).
• Optimiser les traitements sur GCP (BigQuery, Dataflow, Dataproc).
• Collaborer avec les équipes Data Science et DevOps pour industrialiser les solutions.
• Assurer performance, fiabilité et sécurité des infrastructures data.

Connaissances

GCP

Apache Kafka

Spark (PySpark/Scala)

Scala

Python

Cassandra

Prometheus Grafana

Airflow

Docker

Kubernetes

Outils

BigQuery

Dataflow

Dataproc

Description du poste

ALTEN, la Maison des ingénieurs, recrute un Data Engineer passionné par le Big Data et les architectures distribuées pour concevoir, déployer et optimiser des solutions data à grande échelle.

Vous concevrez et maintiendrez des pipelines data robustes sur GCP (BigQuery, Dataflow) et travaillerez avec Kafka, Spark et Cassandra. Collaboration avec Data Science et DevOps, veillant à performance et sécurité des environnements.