Data Engineer / Développeur Big Data Senior (H/F) -Nantes

Argain-Consulting-Innovation; Nantes; On-site; EUR 55,000 - 75,000; Full time

Job summary

Argain-Consulting-Innovation recherche un Data Engineer / Développeur Big Data Senior pour intervenir sur une plateforme de données à fort volume. Vous participerez à la conception, au développement et à l'amélioration continue, en temps réel et en batch.

Le candidat idéal maîtrise Spark, Kafka et l'écosystème Hadoop, avec une forte culture DevOps et une expérience Agile/Scrum. Esprit d'équipe et sens de la qualité seront essentiels pour réussir dans ce rôle.

Qualifications

• Expérience solide en développement Big Data et architectures distribuées.
• Maîtrise de Spark, Kafka et de l'écosystème Hadoop.
• Bonne culture DevOps et intégration continue.

Responsibilities

• Contribuer au développement et à l'amélioration de la plateforme data en équipe agile.
• Concevoir et faire évoluer les architectures de traitement de données.
• Assurer qualité, performance et maintenabilité du code.
• Mettre en place et améliorer les automatisations de tests et CI/CD.

Skills

Esprit d'équipe

Agile/Scrum

Capacité à challenger les besoins

Force de proposition

Sens de la qualité

Tools

Spark

Kafka

Hadoop

HDFS

Hive

HBase

Phoenix

GitLab CI/CD

Jenkins

Artifactory

SonarQube

ELK

Grafana

JUnit

Xray

Job description

Contexte

Dans le cadre du renforcement d'une équipe Data agile, nous recherchons un Data Engineer / Développeur Big Data Senior pour intervenir sur une plateforme de données à fort volume. Vous participerez à la conception, au développement et à l'amélioration continue de solutions permettant de valoriser et exploiter des données en temps réel et en batch.

Vos missions

• Développer et maintenir de nouvelles fonctionnalités au sein d'une équipe agile.
• Concevoir et faire évoluer les architectures de traitement de données.
• Participer aux choix techniques et accompagner les autres membres de l'équipe.
• Garantir la qualité, la performance et la maintenabilité du code.
• Mettre en place et améliorer les processus d'automatisation des tests.

Contribuer à l'amélioration continue des pratiques de développement et d'exploitation

Environnement technique

Big Data : Spark (batch & streaming), Kafka
Langages : Scala, Java
API : Conception et développement d'API
Data Platform : Hadoop, HDFS, Hive, HBase, Phoenix
DevOps & CI/CD : GitLab CI/CD, Jenkins, Artifactory
Qualité & Monitoring : SonarQube, ELK, Grafana
Tests : JUnit, Xray, automatisation des tests

Profil recherché

Expérience solide en développement Big Data et architectures distribuées.
Maîtrise de Spark, Kafka et de l'écosystème Hadoop.
Bonne culture DevOps et intégration continue.
Expérience des environnements Agile/Scrum.
Esprit d'équipe, capacité à challenger les besoins et à être force de proposition.
Sens de la qualité, de l'automatisation et de l'amélioration continue.
Sensibilité aux problématiques de performance, scalabilité et fiabilité des plateformes Data.

Mission idéale pour un profil souhaitant intervenir sur un environnement Big Data moderne, au sein d'une équipe agile mature et orientée qualité.