Databricks Data Platform Engineer

Devoteam Data Driven; Marcq-en-Barœul; Presencial; EUR 60.000 - 90.000; Jornada completa

Descripción de la vacante

Devoteam Lille recrute un Data Engineer spécialisé en pipelines de données sur Databricks pour concevoir, développer et déployer des solutions scalables.

Vous modéliserez et préparerez les données (Delta Lake), optimiserez les traitements avec Spark, SQL et Python, et travaillerez avec les Data Scientists et les métiers pour industrialiser les cas d’usage Data. Vous appliquerez les pratiques CI/CD et tests automatisés.

Formación

• Diplôme d'ingénieur ou Master universitaire spécialisé en Data, Informatique ou équivalent.
• Expérience confirmée dans la manipulation de données avec Python et SQL, maîtrise Databricks (Spark, Delta Lake).
• Solides connaissances d'un environnement Cloud (Azure, AWS ou GCP) et outils d'automatisation (Git, Terraform).
• Esprit d'analyse, rigueur et capacité à vulgariser des concepts techniques.

Responsabilidades

• Concevoir, développer et déployer des pipelines de données robustes et scalables sur la plateforme Databricks.
• Modéliser et préparer les données (Delta Lake) pour répondre efficacement aux enjeux analytiques.
• Optimiser les performances des traitements de données (Apache Spark, SQL, Python) et garantir la fiabilité de l'architecture.
• Collaborer étroitement avec les Data Scientists et les équipes métiers pour industrialiser les cas d’usage Data.
• Implémenter les bonnes pratiques d’ingénierie logicielle (CI/CD, tests automatisés, versioning) au sein des projets.

Conocimientos

Python

SQL

Databricks

Spark

Delta Lake

Azure

AWS

GCP

Git

Terraform

Educación

Ingénieur / Master en Data / Informatique

Herramientas

Databricks

Spark

Delta Lake

Descripción del empleo

Devoteam Lille recrute un Data Engineer spécialisé en pipelines de données sur Databricks pour concevoir, développer et déployer des solutions scalables.

Vous modéliserez et préparerez les données (Delta Lake), optimiserez les traitements avec Spark, SQL et Python, et travaillerez avec les Data Scientists et les métiers pour industrialiser les cas d’usage Data. Vous appliquerez les pratiques CI/CD et tests automatisés.