Databricks Analytics Engineer - Build Scalable Data Pipelines

Devoteam; Lille; On-site; EUR 60,000 - 90,000; Full time

Job summary

Devoteam Lille recherche un ingénieur data confirmé pour concevoir et déployer des pipelines de données sur Databricks, en collaboration avec les Data Scientists et les métiers.

Vous maîtrisez Python, SQL et Delta Lake, avez de l'expérience sur Spark et les plateformes Cloud (Azure/AWS/GCP), et vous appliquez les pratiques CI/CD et les tests automatisés pour assurer une architecture robuste.

Qualifications

• Diplôme d'ingénieur ou Master universitaire spécialisé en Data ou Informatique.
• Expérience confirmée en manipulation de données avec Python et SQL, et maîtrise de Databricks et Delta Lake.
• Bonnes connaissances Cloud (Azure, AWS ou GCP) et outils d'automatisation (Git, Terraform).

Responsibilities

• Concevoir, développer et déployer des pipelines de données robustes et scalables sur la plateforme Databricks.
• Modéliser et préparer les données (Delta Lake) pour répondre efficacement aux enjeux analytiques.
• Optimiser les performances des traitements de données (Apache Spark, SQL, Python) et garantir la fiabilité de l'architecture.
• Collaborer étroitement avec les Data Scientists et les équipes métiers pour industrialiser les cas d'usage Data.
• Implémenter les bonnes pratiques d'ingénierie logicielle (CI/CD, tests automatisés, versioning).

Skills

Python

SQL

Databricks

Spark

Delta Lake

Git

Terraform

CI/CD

Tests automatisés

Cloud (Azure AWS GCP)

Education

Diplôme d'ingénieur ou Master en Data/Informatique

Tools

Terraform

Git

CI/CD tooling

Job description

Devoteam Lille recherche un ingénieur data confirmé pour concevoir et déployer des pipelines de données sur Databricks, en collaboration avec les Data Scientists et les métiers.

Vous maîtrisez Python, SQL et Delta Lake, avez de l'expérience sur Spark et les plateformes Cloud (Azure/AWS/GCP), et vous appliquez les pratiques CI/CD et les tests automatisés pour assurer une architecture robuste.