Ingénieur Data Spark/Scala – Opérations & Pipelines

Onyx-Conseil; Paris; Sur place; EUR 60 000 - 90 000; Plein temps

Résumé du poste

Onyx-Conseil intègre une équipe SI au sein d’un groupe d’assurance de premier plan, pour piloter le socle décisionnel dans un écosystème Big Data (Data Lake et Data Warehouse) hébergé sur Oracle Exadata. Vous garantissez la continuité, la qualité et l’évolution des pipelines.

Les missions couvrent le suivi de production, la gestion d’incidents Spark/Scala, la maintenance évolutive, la recette et les déploiements, ainsi que la documentation et la gouvernance des correctifs.

Qualifications

• Expérience en supervision de pipelines de données (batch et streaming).
• Capacité à diagnostiquer et résoudre des incidents sur des jobs Spark/Scala.
• Maintenance et évolutions des pipelines en réponse aux besoins métiers ou projets.
• Rédaction de plans de tests et conduite de validation en CI/CD.
• Documentation d’exploitation et gouvernance des données.

Responsabilités

• Suivi de production & exploitation : supervision et monitoring quotidiens des chaînes de traitement.
• Gestion des incidents & reprises de données : diagnostiquer et résoudre les incidents sur les jobs Spark/Scala.
• Maintenance évolutive & corrective : développer et implémenter correctifs et évolutions mineures.
• Recette, tests et déploiements : rédiger plans de tests et livrer patches en prod.
• Documentation & gouvernance : rédiger spécifications et assurer reporting au chef de projet.

Connaissances

Surveillance production

Gestion incidents

Maintenance évolutive

Tests et déploiement

Documentation

Gouvernance data

Formation

Diplôme d'ingénieur/ Master informatique

Outils

Spark

Scala

Oracle Exadata

Description du poste

Onyx-Conseil intègre une équipe SI au sein d’un groupe d’assurance de premier plan, pour piloter le socle décisionnel dans un écosystème Big Data (Data Lake et Data Warehouse) hébergé sur Oracle Exadata. Vous garantissez la continuité, la qualité et l’évolution des pipelines.

Les missions couvrent le suivi de production, la gestion d’incidents Spark/Scala, la maintenance évolutive, la recette et les déploiements, ainsi que la documentation et la gouvernance des correctifs.