Ingénieur Databricks Confirmé (F/H)

Groupe Talents Handicap; Bezons; Sur place; EUR 55 000 - 80 000; Plein temps

Résumé du poste

Groupe Talents Handicap recrute un expert Data pour intégrer les squads Data & IA et intervenir sur l’ensemble du cycle de vie des solutions Data.

Vous concevrez, développerez et maintiendrez des pipelines (batch, streaming, near real-time) et mettrez en œuvre les bonnes pratiques DataOps / DevOps dans un environnement agile.

Responsabilités

• Concevoir, développer et maintenir des pipelines de données (batch, streaming, near real-time).
• Implémenter des traitements sur Databricks (Spark, Delta Lake, notebooks, jobs, workflows).
• Optimiser les performances, la scalabilité et la robustesse des traitements.
• Mettre en œuvre les bonnes pratiques DataOps / DevOps (versioning, CI/CD, tests, supervision).
• Participer aux mises en production et au MCO (maintenance corrective, préventive et évolutive).
• Analyser et corriger les incidents (root cause analysis, reprise des flux, fiabilisation).
• Travailler en étroite collaboration avec les Tech Leads et Architectes Data.
• Contribuer au cadrage technique, aux estimations et aux POC / POV.
• Documenter les solutions et participer à la capitalisation Atos

Outils

Databricks

Spark

Delta Lake

Notebooks

Workflows

Description du poste

Vos missions :

Intégré(e) au sein d’équipes projet agiles (squads Data & IA), vous intervenez sur l’ensemble du cycle de vie des solutions Data.

Développement & industrialisation

• Concevoir, développer et maintenir des pipelines de données (batch, streaming, near real-time)
• Implémenter des traitements sur Databricks (Spark, Delta Lake, notebooks, jobs, workflows
• Optimiser les performances, la scalabilité et la robustesse des traitements

DataOps & exploitation

• Mettre en œuvre les bonnes pratiques DataOps / DevOps (versioning, CI/CD, tests, supervision)
• Participer aux mises en production et au MCO (maintenance corrective, préventive et évolutive)
• Analyser et corriger les incidents (root cause analysis, reprise des flux, fiabilisation)

Collaboration projet

• Travailler en étroite collaboration avec les Tech Leads et Architectes Data
• Contribuer au cadrage technique, aux estimations et aux POC / POV
• Documenter les solutions et participer à la capitalisation Atos