Consultant BI / Data Engineer Confirmé – Spark / SQL / Databricks chez ENEDIS à Lyon

Onyx-Conseil; Lyon; Sur place; EUR 55 000 - 85 000; Plein temps

Résumé du poste

ENEDIS, Lyon, recherche un Consultant BI / Data Engineer confirmé pour concevoir et faire évoluer l’architecture décisionnelle: datawarehouse, datamarts et pipelines Big Data.

Vous piloterez l’intégration ETL, les traitements Spark, la modélisation des entrepôts et la production de rapports métier, en environnement agile et en collaboration avec les équipes métiers et IT.

Qualifications

• Maîtrise avancée de SQL et des modèles DWH.
• Expérience avérée avec Spark et Databricks.
• Connaissance des pipelines ETL et du traitement Big Data.
• Capacités d’industrialisation des flux et qualité des données.

Responsabilités

• Analyser les besoins métiers et techniques et qualifier les données.
• Concevoir, modéliser et enrichir datawarehouses et datamarts.
• Développer les processus ETL/pipelines Big Data et optimiser les traitements Spark.
• Produire rapports et tableaux de bord lisibles par les métiers.
• Accompagner les utilisateurs et assurer la maintenance des livrables.
• Participer aux revues de code et à l’amélioration de l’architecture.

Connaissances

SQL

Spark

Databricks

Modélisation DWH

Python

Java

PL/SQL

Data quality

Outils

Informatica

Tableau Server

Git

Jenkins

Ansible

Terraform

Control-M

Oracle

CEPH S3

Hive

Description du poste

Consultant BI / Data Engineer Confirmé – Spark / SQL / Databricks chez ENEDIS à Lyon

Contexte de la mission

Vous rejoignez une équipe data/BI en charge de la mise en place et de l’évolution de l’architecture décisionnelle : datawarehouse, datamarts, traitements de données et reporting métier.

Objectifs et livrables

Missions

• Analyser les besoins fonctionnels et techniques des métiers
• Localiser et qualifier les données nécessaires
• Concevoir, modéliser et enrichir les datawarehouses et datamarts
• Développer les processus d’intégration de données (ETL / pipelines Big Data)
• Traiter et nettoyer les données, garantir leur qualité
• Participer à la migration vers le cloud, (Databricks )
• Développer et optimiser des traitements Spark
• Produire des rapports et tableaux de bord lisibles pour les métiers
• Accompagner et former les utilisateurs dans l’exploitation des données et des rapports
• Tester, documenter, déployer et maintenir les livrables en conditions opérationnelles
• Participer aux revues de code et à l’amélioration continue de l’architecture décisionnelle

Stack & environnement technique

• Big Data : Spark (essentiel), Hive, Indexima
• Cloud / Data Platform : Databricks (fort enjeu de migration)
• Stockage : Oracle, CEPH S3 (parquet)
• Langages : SQL, Python, PL/SQL, Shell, Java (plus apprécié mais pas obligatoire)
• ETL : Informatica
• Dataviz : Tableau Server
• CI/CD & outillage : Git, Jenkins, Ansible, Terraform
• Ordonnancement : Control-M
• Méthodologie : environnement agile

Profil recherché

• Minimum 5 ans d’expérience sur des fonctions BI / Data Engineer / Ingénieur Décisionnel
• Très bonne maîtrise de SQL
• Solide expérience en modélisation d’entrepôts de données (DWH, datamarts)
• Compétences avérées en traitement et nettoyage de données
• Maîtrise de Spark indispensable
• Expérience en accompagnement métier : ateliers, recueil de besoins, formation, support
• Bon niveau de développement (Spark, SQL, idéalement Python et/ou Java en plus)

Soft skills

• Autonomie, rigueur, sens de la qualité
• Esprit d’équipe, bonnes capacités de communication
• Curiosité, envie de comprendre le métier et les usages data
• Capacité d’analyse et de synthèse
• Force de proposition sur les solutions techniques et décisionnelles