Databricks Data Engineer: Scalable Pipelines & ML

Synchrone Fr; Île-de-France; Sur place; EUR 65 000 - 90 000; Plein temps

Avantages offerts par ce poste

Prime de participation et vacances

Indemnités de télétravail

Plan Épargne Retraite Entreprise

Résumé du poste

Synchrone recrute un Data Engineer spécialisé Databricks pour piloter les pipelines Big Data sur Databricks et garantir l’industrialisation, la scalabilité et la qualité des flux pour des projets analytiques et IA à grande échelle.

Vous concevrez, développerez et maintiendrez des pipelines robustes, utiliserez Delta Lake, Spark SQL et MLflow, et collaborerez avec les Data Scientists pour industrialiser les modèles ML et les workflows d’IA.

Qualifications

• Minimum 4 ans d’expérience en Data Engineering sur Databricks ou environnements Big Data Cloud.
• Expertise avancée sur Databricks (Delta Lake, notebooks, Spark SQL, MLflow).
• Solide expérience en Python, SQL et Spark, avec capacité à industrialiser des pipelines et modèles ML.

Responsabilités

• Concevoir, développer et maintenir des pipelines de données robustes et scalables sur Databricks.
• Exploiter les fonctionnalités de Databricks (Delta Lake, Spark SQL, MLflow) pour gérer les workflows et modèles prédictifs.
• Transformer et intégrer des données issues de sources multiples dans Databricks.
• Collaborer avec les Data Scientists pour industrialiser les modèles ML et Analytics dans Databricks.
• Garantir la qualité, la sécurité et la fiabilité des données sur les environnements Databricks Cloud.
• Participer aux choix d’architecture Cloud et Big Data pour optimiser les performances et la scalabilité.
• Automatiser les processus de déploiement et de supervision via DataOps et CI/CD intégrés à Databricks.

Connaissances

Python

SQL

Spark

Esprit analytique

Outils

Databricks

Delta Lake

Spark SQL

MLflow

Description du poste

Synchrone recrute un Data Engineer spécialisé Databricks pour piloter les pipelines Big Data sur Databricks et garantir l’industrialisation, la scalabilité et la qualité des flux pour des projets analytiques et IA à grande échelle.

Vous concevrez, développerez et maintiendrez des pipelines robustes, utiliserez Delta Lake, Spark SQL et MLflow, et collaborerez avec les Data Scientists pour industrialiser les modèles ML et les workflows d’IA.