Expert Databricks & Gouvernance Data — RUN

Mosofty; Aubigny-sur-Nère; On-site; EUR 70,000 - 110,000; Full time

Job summary

Mosofty recherche un Administrateur dataplateforme/Workspace/Expert Databricks pour une mission longue dans le secteur de l’énergie. Vous piloterez les workspaces, les ressources et la sécurité, tout en assurant le RUN et la gouvernance des données.

Vous déployez Unity Catalog, migrez le Data Lake legacy et mettez en place des pipelines CI/CD avec Git et Databricks Asset Bundles, tout en documentant et en formant les Data Engineers et métiers concernés.

Qualifications

• Administration Databricks: gérer workspaces, calculs et habilitations.
• Unity Catalog: structurer les catalogues et règles d’accès, nommage et qualité des données.
• Migration Data Lake Legacy: concevoir architecture cible et plan de migration sans interruption.
• CI/CD pipelines: automatiser les déploiements avec Git et Databricks Asset Bundles.
• Développement: Python et Apache Spark, optimisation des flux et fiabilité.
• Documentation: rédiger guides et accompagner les Data Engineers et métiers.

Responsibilities

• Administrer les workspaces et ressources Databricks, gérer les habilitations et coûts.
• Déployer Unity Catalog et définir les règles d’accès et conventions de nommage.
• Organiser la migration Data Lake Legacy par vagues sans interruption.
• Mettre en place pipelines CI/CD avec Git et Databricks Asset Bundles.
• Industrialiser les pipelines data avec Python et Spark; optimiser modélisation.
• Rédiger documentation technique et accompagner les Data Citizens et ingénieurs.

Skills

Databricks Admin

Unity Catalog

DataOps

CI/CD

Git

Python

Apache Spark

Terraform

Cloud (AWS/Azure)

Data governance

Tools

Databricks Asset Bundles

Terraform

Job description

Mosofty recherche un Administrateur dataplateforme/Workspace/Expert Databricks pour une mission longue dans le secteur de l’énergie. Vous piloterez les workspaces, les ressources et la sécurité, tout en assurant le RUN et la gouvernance des données.

Vous déployez Unity Catalog, migrez le Data Lake legacy et mettez en place des pipelines CI/CD avec Git et Databricks Asset Bundles, tout en documentant et en formant les Data Engineers et métiers concernés.