Expert Databricks / Lead Data Engineer

KAIZEN Solutions (KZS); Lyon; Hybride; EUR 60 000 - 70 000; Plein temps

Avantages offerts par ce poste

Télétravail 50%

Tickets restaurant 8,50 €

Forfait mobilité durable jusqu'à 600 €/an

Mutuelle Malakoff Médéric

Résumé du poste

KAIZEN Solutions (KZS) recherche un Lead Data Engineer pour rejoindre son équipe à Lyon. Vous travaillerez sur un projet de migration et d'industrialisation d'une plateforme data. Le rôle nécessite une solide expertise en Databricks, Spark, et Python.

Le candidat idéal possédera un minimum de 5 ans d'expérience avec une certification Databricks. Le poste offre des avantages tels que télétravail et participation.

Qualifications

• Minimum 5 ans d'expérience sur Databricks avec certification.
• Très bonne maîtrise de Spark, PySpark, Python et SQL.
• Expérience en industrialisation de pipelines.

Responsabilités

• Concevoir et maintenir des pipelines data sous Databricks.
• Développer des traitements en Python, PySpark et SQL.
• Assurer la qualité et la fiabilité des traitements.

Connaissances

Databricks

Spark

Python

SQL

PySpark

CI/CD

Tests

Delta Lake

Formation

Certification Databricks

Outils

Terraform

Power BI

Description du poste

LE CONTEXTE

Nous recherchons un Lead Data Engineer / Expert Databricks pour rejoindre une équipe chez un acteur majeur du secteur de l'énergie. Vous interviendrez sur un projet de migration et d'industrialisation d'une nouvelle plateforme data, dans un environnement technique exigeant alliant enjeux de performance, de qualité et d'amélioration continue.

VOS MISSIONS

• Concevoir, développer et maintenir des pipelines data sous Databricks / Spark
• Développer les traitements en Python, PySpark et SQL
• Contribuer à la définition et à la mise en oeuvre du modèle de données cible
• Industrialiser les pipelines : standards de développement, tests, CI/CD, déploiement
• Orchestrer les traitements via Databricks Workflows / Lakeflow Jobs
• Contribuer à la qualité, à l'observabilité et à la fiabilité des traitements
• Assurer le run : suivi de production, analyse d'incidents, amélioration continue
• Prendre en compte les enjeux de performance et de maîtrise des coûts
• Participer au cadrage des besoins avec le Product Owner et les équipes utilisatrices
• Contribuer aux choix techniques liés à la nouvelle plateforme data
• Participer à la mise en place des pratiques de développement Databricks
• Contribuer à la documentation technique et aux standards d'équipe
• Participer aux rituels agiles et à l'amélioration continue de la feature team

ENVIRONNEMENT TECHNIQUE

• Traitement et pipelines data : Databricks, Spark, PySpark
• Langages : Python, SQL
• Modélisation : Delta Lake, Unity Catalog
• Industrialisation : CI/CD, tests, Databricks Workflows
• Cloud public (sans contrainte de provider), Terraform
• Apprécié : Kafka, Lakeflow / DLT, Power BI

PROFIL RECHERCHÉ

• Minimum 5 ans d'expérience sur Databricks, avec certification Databricks (impératif)
• Très bonne maîtrise de Spark / PySpark et de Python / SQL (impératif)
• Solide expérience en modélisation de données
• Participation à un projet de migration ou de transformation data
• Expérience en industrialisation de pipelines (CI/CD, tests, déploiement)Autonomie, leadership technique, force de proposition
• Capacité à travailler avec des profils variés : Data, BI, PO, métier
• Niveau de séniorité visé : confirmé / senior (niveau 3)

INFORMATIONS COMPLÉMENTAIRES

• Fourchette de rémunération selon profil entre 60 k et 70 k€ brut annuel
• Localisation : Lyon
• Démarrage souhaité : 15 octobre 2026
• Télétravail : 50 %
• Participation et intéressement
• PEE et PERECOL
• CSE avec cagnotte individuelle 200 €/an
• Téléphone + abonnement pro
• Tickets restaurant 8,50 €
• Mutuelle Malakoff Médéric Eco Activ 9
• Forfait mobilité durable jusqu'à 600 €/an