Energy-Sector Data Engineer: AWS, Spark & Databricks

ALTEN; Bezons; On-site; EUR 55,000 - 90,000; Full time

Job summary

Worldgrid, société de conseil spécialisée dans la transformation digitale des acteurs de l’énergie, recherche un Data Engineer pour concevoir, développer et optimiser des pipelines de données à grande échelle.

Vous travaillerez sur des projets utilisant AWS, Databricks et Apache Spark (PySpark/Scala), en collaboration avec les équipes Data Science et Analytics, afin de délivrer des données fiables et exploitables.

Qualifications

• Minimum 3 ans d'expérience en Data Engineering.
• Maîtrise de Spark, Databricks et PySpark/Scala.
• Bonne connaissance AWS et SQL.
• Capacité à travailler en équipe et communiquer.

Responsibilities

• Concevoir, développer et maintenir des pipelines de données (batch et streaming).
• Optimiser les traitements sur Databricks et Delta Lake.
• Gérer les infrastructures AWS (S3, Glue, EMR, Redshift).
• Automatiser les workflows avec Airflow ou Step Functions.
• Collaborer avec les équipes Data Science et Analytics pour des données fiables.
• Assurer la qualité des données et la traçabilité.
• Participer à l'évolution de l'architecture data.

Skills

Apache Spark

PySpark/Scala

Databricks

AWS

SQL

Modélisation de données

Airflow

Step Functions

Tools

Airflow

Step Functions

Job description

Worldgrid, société de conseil spécialisée dans la transformation digitale des acteurs de l’énergie, recherche un Data Engineer pour concevoir, développer et optimiser des pipelines de données à grande échelle.

Vous travaillerez sur des projets utilisant AWS, Databricks et Apache Spark (PySpark/Scala), en collaboration avec les équipes Data Science et Analytics, afin de délivrer des données fiables et exploitables.