Data Engineer Spark & Databricks - Big Data Énergie

Viveris; Lyon; Hybride; EUR 55 000 - 75 000; Plein temps

Avantages offerts par ce poste

Rémunération attractive

Mutuelle familiale

Tickets restaurant 60%

Télétravail partiel

Remboursement des transports

Résumé du poste

Viveris recherche un Data Engineer au sein d'un acteur majeur du secteur de l'énergie, pour intervenir sur des plateformes de traitement de données à grande échelle et participer à la modernisation du SI décisionnel. Vous travaillerez sur la migration vers Spark et Databricks, le développement et l'optimisation des pipelines, et la gouvernance des données tout en assurant fiabilité et qualité.

Diplômé(e) d'un Bac+5 en informatique avec au moins 4 ans d'expérience, vous évoluerez dans un cadre

Qualifications

• Formation BAC+5 en informatique avec au moins 4 ans d'expérience sur un poste similaire.
• Expérience dans les métiers de l'énergie est un grand plus.
• Maîtrise Spark et Databricks; bonnes compétences SQL/PL-SQL et modélisation des données.

Responsabilités

• Migrer les traitements Informatica et PL/SQL vers Spark.
• Participer à la migration des plateformes de données vers le cloud.
• Garantir la performance, la robustesse et la qualité des données.
• Documenter les développements et partager les connaissances.

Connaissances

Spark

Databricks

SQL/PL-SQL

Data modeling

Python/Java

Formation

BAC +5 en informatique

Outils

PostgreSQL

S3/Blob storage

REST API

Description du poste

Viveris recherche un Data Engineer au sein d'un acteur majeur du secteur de l'énergie, pour intervenir sur des plateformes de traitement de données à grande échelle et participer à la modernisation du SI décisionnel. Vous travaillerez sur la migration vers Spark et Databricks, le développement et l'optimisation des pipelines, et la gouvernance des données tout en assurant fiabilité et qualité.

Diplômé(e) d'un Bac+5 en informatique avec au moins 4 ans d'expérience, vous évoluerez dans un cadre