MCO Databricks - Production & Monitoring Expert

PREREQUIS; Île-de-France; On-site; EUR 60,000 - 90,000; Full time

Benefits offered by this job

Transport Titre pris en charge + Vélo

Primes de congés payés

Participation à l’abonnement Internet

Plan d’Epargne Entreprise (PEE) et CSE

Compte Epargne Temps

TeamStarter et activités RSE

Job summary

PREREQUIS recherche pour l'un de ses clients un MCO Databricks en CDI (H/F). Vous interviendrez à la croisée du Data Engineering, de la Production et du MCO, avec un rôle clé dans la montée en compétence de l’équipe de notre client.

Vous suivrez les jobs Databricks en production, diagnostiquer des incidents et améliorer le monitoring ainsi que l’observabilité des pipelines. Vous documenterez les traitements et accompagnerez l’équipe MCO vers plus d’autonomie.

Qualifications

• Expérience significative sur Databricks en production.
• MCO et supervision des pipelines de données.
• Connaissance de SQL et Python/PySpark pour le diagnostic.
• Maîtrise d’Azure Data Factory et gestion des incidents.

Responsibilities

• Suivre les jobs et workflows Databricks en production et contrôler les traitements nocturnes.
• Analyser les échecs, diagnostiquer les causes et accompagner les relances.
• Diagnostiquer les incidents via logs et métriques et contribuer à leur correction.
• Mettre en place le monitoring, l’alerting et les dashboards KPI MCO.
• Documenter les traitements en production et rédiger les runbooks.

Skills

Databricks

SQL

Python / PySpark

Azure Data Factory

Tools

dbt

OpCon

Snowflake

SnapLogic

MicroStrategy

Power BI

Job description

PREREQUIS recherche pour l'un de ses clients un MCO Databricks en CDI (H/F). Vous interviendrez à la croisée du Data Engineering, de la Production et du MCO, avec un rôle clé dans la montée en compétence de l’équipe de notre client.

Vous suivrez les jobs Databricks en production, diagnostiquer des incidents et améliorer le monitoring ainsi que l’observabilité des pipelines. Vous documenterez les traitements et accompagnerez l’équipe MCO vers plus d’autonomie.