MCO Databricks (H/F)

PREREQUIS; Île-de-France; On-site; EUR 60,000 - 90,000; Full time

Benefits offered by this job

Transport Titre pris en charge + Vélo

Primes de congés payés

Participation à l’abonnement Internet

Plan d’Epargne Entreprise (PEE) et CSE

Compte Epargne Temps

TeamStarter et activités RSE

Job summary

PREREQUIS recherche pour l'un de ses clients un MCO Databricks en CDI (H/F). Vous interviendrez à la croisée du Data Engineering, de la Production et du MCO, avec un rôle clé dans la montée en compétence de l’équipe de notre client.

Vous suivrez les jobs Databricks en production, diagnostiquer des incidents et améliorer le monitoring ainsi que l’observabilité des pipelines. Vous documenterez les traitements et accompagnerez l’équipe MCO vers plus d’autonomie.

Qualifications

• Expérience significative sur Databricks en production.
• MCO et supervision des pipelines de données.
• Connaissance de SQL et Python/PySpark pour le diagnostic.
• Maîtrise d’Azure Data Factory et gestion des incidents.

Responsibilities

• Suivre les jobs et workflows Databricks en production et contrôler les traitements nocturnes.
• Analyser les échecs, diagnostiquer les causes et accompagner les relances.
• Diagnostiquer les incidents via logs et métriques et contribuer à leur correction.
• Mettre en place le monitoring, l’alerting et les dashboards KPI MCO.
• Documenter les traitements en production et rédiger les runbooks.

Skills

Databricks

SQL

Python / PySpark

Azure Data Factory

Tools

dbt

OpCon

Snowflake

SnapLogic

MicroStrategy

Power BI

Job description

Nous recherchons pour l'un de nos clients un MCO Databricks en CDI (H/F)

Vous interviendrez à la croisée du Data Engineering, de la Production et du MCO, avec un rôle clé dans la montée en compétence de l’équipe de notre client.

Exploitation et MCO Databricks

• Suivre au quotidien les jobs et workflows Databricks en production, avec un contrôle des traitements de nuit dès 7h30.
• Analyser les échecs, identifier les causes racines et effectuer ou accompagner les relances.
• Diagnostiquer les incidents à partir des logs et métriques, et contribuer à leur correction.
• Participer à la gestion des problèmes pour réduire durablement les incidents récurrents.

Industrialisation de la supervision

• Mettre en place ou améliorer le monitoring et l’alerting.
• Définir les contrôles à appliquer sur les pipelines Data.
• Contribuer à la construction de dashboards de supervision et de KPI MCO.

Automatisation et amélioration continue

• Automatiser les actions répétitives de diagnostic et de reprise.
• Renforcer la fiabilité des pipelines et l’observabilité de la plateforme.

Documentation et transmission

• Documenter les traitements en production, rédiger les runbooks et les procédures de relance et de reprise.
• Former et accompagner l’équipe MCO pour qu’elle gagne en autonomie sur les incidents récurrents.
• 3 à 5 ans d’expérience, dont une expérience significative sur Databricks en production.
• Maîtrise de Databricks, SQL, Python / PySpark et Azure Data Factory, ainsi que de la gestion des incidents.
• Appréciés : dbt, OpCon, Snowflake, SnapLogic, MicroStrategy, Power BI.

Vous voulez travailler dans une entreprise à taille humaine où le collaborateur est véritablement au cœur des préoccupations ?

Intégrer PREREQUIS, c’est rejoindre une entreprise conviviale, aux valeurs collectives, certifiée Great Place to Work 2024 qui :

• S’articule autour d’une ambition forte de “grandir ensemble”
• Accompagne le collaborateur sur la gestion de sa mission et sa carrière avec un management de proximité
• Permet à tous les collaborateurs de porter des projets de cohésion, de solidarité ou de RSE grâce à la plateforme TeamStarter
• Invite les collaborateurs à célébrer les anniversaires et des séminaires annuels PREREQUIS lors de séjours organisés (Lisbonne, Naples, Deauville)

De plus, les collaborateurs bénéficient de nombreux avantages :

• Prise en charge à 100% du titre de transport + Velib Plus
• Primes de congés payés
• Participation à votre abonnement internet et mobile
• Prime de participation et d'intéressement, Plan d'Épargne Entreprise (PEE),Compte Epargne Temps, CSE, PERECO

Chez PREREQUIS, le processus de recrutement est simple, rapide et efficace.