Data Engineer — Real-Time Kafka & Cloud Pipelines

Pôle Sud; Valbonne; On-site; EUR 55,000 - 75,000; Full time

Job summary

Pôle Sud, cabinet de conseil en transformation digitale basé à Valbonne, recherche un Data Engineer pour concevoir, industrialiser et fiabiliser les flux de données. Le poste impliquera des pipelines GCP (BigQuery/Dataflow) et des traitements distribués, avec un focus sur Kafka et le streaming en temps réel.

Autonome et rigoureux, vous collaborerez étroitement avec les équipes techniques et métier pour proposer des solutions robustes et évolutives, et assureront la traçabilité et la qualité des

Qualifications

• Expérience confirmée en Data Engineering sur GCP.
• Maîtrise Kafka et streaming en temps réel.
• Maîtrise Python ou Java pour traitements data.

Responsibilities

• Concevoir et industrialiser des pipelines de données sur GCP, notamment BigQuery et Dataflow.
• Mettre en place et maintenir des traitements batch et temps réel dans un environnement distribué.
• Développer des flux de données autour de Kafka et des mécanismes de streaming.
• Assurer le rôle de référent technique sur les sujets data engineering et accompagner les choix d’architecture.
• Optimiser les performances, la fiabilité et la maintenabilité des traitements existants.
• Collaborer avec les équipes produit, data et techniques pour traduire les besoins en solutions concrètes.
• Participer aux revues techniques, à la documentation des traitements et à la capitalisation des bonnes pratiques.
• Veiller à la qualité, à la traçabilité et à la cohérence des données tout au long de la chaîne de traitement.

Skills

GCP

Kafka

Streaming

Python

Java

Autonomie

Tools

Dataflow

BigQuery

Hadoop

Spark

Job description

Pôle Sud, cabinet de conseil en transformation digitale basé à Valbonne, recherche un Data Engineer pour concevoir, industrialiser et fiabiliser les flux de données. Le poste impliquera des pipelines GCP (BigQuery/Dataflow) et des traitements distribués, avec un focus sur Kafka et le streaming en temps réel.

Autonome et rigoureux, vous collaborerez étroitement avec les équipes techniques et métier pour proposer des solutions robustes et évolutives, et assureront la traçabilité et la qualité des