Data Engineer – Pipelines, Spark & Cloud Platform

Diametral; Lyon; On-site; EUR 60,000 - 90,000; Full time

Job summary

Diametral recherche un ingénieur Data/Data Engineer expérimenté pour industrialiser les pipelines de données et optimiser les performances dans un environnement cloud (AWS obligatoire, Azure apprécié). Polyvalent, vous contribuerez au déploiement rapide de services et à l’amélioration continue des architectures data.

Vous interviendrez sur des sujets transverses avec ML/DS, DevOps et DevSecOps, en veillant à la documentation et à la qualité du code.

Qualifications

• Master 2 en informatique ou équivalent avec expérience en Data Engineering et cloud.
• Exposition forte aux environnements cloud (AWS indispensable, Azure apprécié).
• Maîtrise des pipelines de données, du traitement distribué et des architectures data modernes.

Responsibilities

• Industrialisation des pipelines de données et ingestion, transformation et enrichissement.
• Optimisation des performances et tuning SQL/distribution des calculs.
• Participation à une plateforme data cross-CSP et déploiement rapide de fonctionnalités.
• Automatisation CI/CD, monitoring et infrastructure as code.
• Collaboration avec ML/DS, DevOps et DevSecOps sur sujets transverses.
• Conception d’architectures robustes et rédaction de documents d’architecture.

Skills

Cloud AWS / Azure

Data pipelines

Distributed processing

Documentation

Cross-team collaboration

Bilingual FR/EN

Education

Master 2 informatique

Tools

AWS

Azure

Databricks

Job description

Diametral recherche un ingénieur Data/Data Engineer expérimenté pour industrialiser les pipelines de données et optimiser les performances dans un environnement cloud (AWS obligatoire, Azure apprécié). Polyvalent, vous contribuerez au déploiement rapide de services et à l’amélioration continue des architectures data.

Vous interviendrez sur des sujets transverses avec ML/DS, DevOps et DevSecOps, en veillant à la documentation et à la qualité du code.