Data Engineer

Pôle Sud; Valbonne; On-site; EUR 55,000 - 75,000; Full time

Job summary

Pôle Sud, cabinet de conseil en transformation digitale basé à Valbonne, recherche un Data Engineer pour concevoir, industrialiser et fiabiliser les flux de données. Le poste impliquera des pipelines GCP (BigQuery/Dataflow) et des traitements distribués, avec un focus sur Kafka et le streaming en temps réel.

Autonome et rigoureux, vous collaborerez étroitement avec les équipes techniques et métier pour proposer des solutions robustes et évolutives, et assureront la traçabilité et la qualité des

Qualifications

• Expérience confirmée en Data Engineering sur GCP.
• Maîtrise Kafka et streaming en temps réel.
• Maîtrise Python ou Java pour traitements data.

Responsibilities

• Concevoir et industrialiser des pipelines de données sur GCP, notamment BigQuery et Dataflow.
• Mettre en place et maintenir des traitements batch et temps réel dans un environnement distribué.
• Développer des flux de données autour de Kafka et des mécanismes de streaming.
• Assurer le rôle de référent technique sur les sujets data engineering et accompagner les choix d’architecture.
• Optimiser les performances, la fiabilité et la maintenabilité des traitements existants.
• Collaborer avec les équipes produit, data et techniques pour traduire les besoins en solutions concrètes.
• Participer aux revues techniques, à la documentation des traitements et à la capitalisation des bonnes pratiques.
• Veiller à la qualité, à la traçabilité et à la cohérence des données tout au long de la chaîne de traitement.

Skills

GCP

Kafka

Streaming

Python

Java

Autonomie

Tools

Dataflow

BigQuery

Hadoop

Spark

Job description

Vous rejoindrez Pôle Sud, cabinet de conseil en transformation digitale, pour intervenir sur des projets data à fort enjeu technique et métier. En tant que Data Engineer, vous serez au cœur de la conception, de l’industrialisation et de la fiabilisation des flux de données, avec un rôle de référent technique sur les sujets de traitement et d’intégration.

Vous travaillerez dans un environnement où la maîtrise de l’écosystème cloud, des pipelines de données et des traitements distribués est essentielle. Votre expérience sur GCP, notamment BigQuery et Dataflow, vous permettra de concevoir des solutions robustes, performantes et adaptées à des usages analytiques comme temps réel.

Le poste demande une forte capacité à structurer des traitements de bout en bout, à collaborer avec les équipes techniques et métier, et à faire évoluer les dispositifs existants avec pragmatisme. Une attention particulière sera portée à votre expérience concrète sur Kafka et sur la mise en œuvre de traitements de données en temps réel, au-delà d’une simple utilisation de l’outil.

Basé à Valbonne, ce rôle s’adresse à une personne autonome, rigoureuse et force de proposition, souhaitant apporter son expertise sur des sujets data exigeants tout en contribuant à la qualité, à la performance et à la pérennité des solutions mises en place.

• Concevoir et industrialiser des pipelines de données sur GCP, notamment avec BigQuery et Dataflow.
• Mettre en place et maintenir des traitements batch et temps réel dans un environnement distribué.
• Développer des flux de données robustes autour de Kafka et des mécanismes de streaming.
• Assurer le rôle de référent technique sur les sujets data engineering et accompagner les choix d’architecture.
• Optimiser les performances, la fiabilité et la maintenabilité des traitements existants.
• Collaborer avec les équipes produit, data et techniques pour traduire les besoins en solutions concrètes.
• Participer aux revues techniques, à la documentation des traitements et à la capitalisation des bonnes pratiques.
• Veiller à la qualité, à la traçabilité et à la cohérence des données tout au long de la chaîne de traitement.

• Poste basé à Valbonne, au sein d’un cabinet à taille humaine.
• Projets data variés avec un impact concret sur les traitements et la qualité des données.
• Environnement collaboratif favorisant l’autonomie et le partage d’expertise.
• Rôle technique reconnu, avec une vraie place dans les choix de conception et d’industrialisation.
• Exposition à des problématiques cloud, streaming et temps réel sur des contextes exigeants.
• Cadre propice à la montée en compétence et à la valorisation de votre expertise data.

Expérience confirmée en Data Engineering avec prise en charge de sujets techniques de bout en bout.Maîtrise de GCP, avec une expérience pratique de BigQuery et Dataflow.Très bonne expérience sur Kafka et sur la conception de traitements de données en temps réel.Capacité démontrée à développer de vrais flux de streaming, et non à utiliser Kafka de manière superficielle.Bonne maîtrise de Python ou de Java pour le développement de traitements data.Expérience sur Hadoop et Spark.Rigueur, autonomie, sens de l’analyse et capacité à agir comme référent technique.