Data Engineer – Big Data Pipelines & Platforms

Région Nouvelle-Aquitaine; Bordeaux; Sur place; EUR 45 000 - 65 000; Plein temps

Résumé du poste

Région Nouvelle-Aquitaine recherche un Data Engineer pour renforcer son équipe Data à Bordeaux. Vous concevrez, développerez et maintiendrez les solutions liées aux données.

De formation Bac+5 en ingénierie, vous avez au moins 2 ans d’expérience en déploiement d’une plateforme Data d’entreprise et une bonne maîtrise du calcul distribué.

Compétences attendues: HDFS, MapReduce, Scala, Spark, Kafka; anglais nécessaire; sens de l’innovation et veille technologique.

Qualifications

• Diplôme Bac+5 en école d’ingénieur ou équivalent, au moins 2 ans d’expérience.
• Bonne maîtrise du calcul distribué: failover, réplication, élection, haute disponibilité.
• Connaissances souhaitées: HDFS, MapReduce, Scala, Spark et Kafka.
• Maîtrise de l’anglais nécessaire.

Responsabilités

• Maintenir et améliorer les pipelines de traitement des données.
• Mettre en place la collecte, le stockage et l’accès aux données.
• Soutenir l’exploitation et proposer des améliorations de service.
• Réaliser une veille technologique sur le calcul distribué.
• Documenter les workflows et communiquer avec les équipes.

Connaissances

Big Data

Data pipelines

Scala

Spark

Kafka

HDFS

MapReduce

Formation

Bac+5 en école d’ingénieur ou équivalent

Description du poste

Région Nouvelle-Aquitaine recherche un Data Engineer pour renforcer son équipe Data à Bordeaux. Vous concevrez, développerez et maintiendrez les solutions liées aux données.

De formation Bac+5 en ingénierie, vous avez au moins 2 ans d’expérience en déploiement d’une plateforme Data d’entreprise et une bonne maîtrise du calcul distribué.

Compétences attendues: HDFS, MapReduce, Scala, Spark, Kafka; anglais nécessaire; sens de l’innovation et veille technologique.