Data Engineer Senior – Big Data, ML, CI/CD & Cloud

Groupe Ingena; Le Chesnay-Rocquencourt; On-site; EUR 65,000 - 90,000; Full time

Job summary

Le Groupe Ingena recherche un profil Data & Big Data pour concevoir, développer et industrialiser des pipelines de données. Vous travaillerez sur Scala, Python ou Java, Spark, Hadoop et les modèles ML, en collaboration avec les Data Scientists.

Vous contribuerez à la gouvernance des données, à la CI/CD et à l’architecture de la plateforme, dans un cadre Agile, dans un contexte bancaire et assurantiel.

Qualifications

• 5 ans minimum en développements Scala, Python ou Java.
• 2 ans minimum sur Spark et traitement des flux en streaming.
• Expertise sur Hadoop (Hive, HBase, HDFS) sous MapR ou Hortonworks.
• Maîtrise des briques analytiques des clouds AWS, GCP ou Azure.
• Sensibilisation à CI/CD (Git, Jenkins).
• Connaissance Docker et Kubernetes est un plus.
• Méthodes Agile (Scrum, Kanban).
• Anglais souhaité.

Responsibilities

• Concevoir, développer et tester des algorithmes de collecte et de traitement de gros volumes de données sous Scala, Python ou Java.
• Automatiser et optimiser les flux de données et leurs visualisations en dashboards.
• Industrialiser les traitements, la qualité et l’intégrité des données.
• Participer à la Modélisation et à la Gouvernance des données (process, normalisation, référentiel,…).
• Contribuer à la scalabilité, la sécurité, la stabilité et la disponibilité des données de la plateforme.
• Analyser les données pour répondre aux questions métiers et participer à l’évolution de l’architecture Big Data.
• Concevoir, Développer et Industrialiser des modèles de Machine Learning, Deep Learning, en collaboration avec les Data Scientists.
• Appliquer une démarche CI/CD (Git, Jira, Jenkins).

Job description

Le Groupe Ingena recherche un profil Data & Big Data pour concevoir, développer et industrialiser des pipelines de données. Vous travaillerez sur Scala, Python ou Java, Spark, Hadoop et les modèles ML, en collaboration avec les Data Scientists.

Vous contribuerez à la gouvernance des données, à la CI/CD et à l’architecture de la plateforme, dans un cadre Agile, dans un contexte bancaire et assurantiel.