Data Engineer confirmé - Spark / SQL / Databricks F/H

PRESTANOVA; Lyon; Sur place; EUR 45 000 - 50 000; Plein temps

Résumé du poste

PRESTANOVA recherche un Data Engineer confirmé pour intervenir sur une plateforme décisionnelle en migration vers le cloud, avec une expertise Spark et SQL. Le poste est basé à Lyon et s’inscrit dans un contrat CDD de 12 mois.

Vous serez en charge de concevoir et fiabiliser des datawarehouses et datamarts, développer des flux d’intégration et pipelines, et produire des restitutions destinées aux métiers, tout en assurant le support et le déploiement des solutions en production.

Qualifications

• 5+ années d'expérience en Data Engineering, BI ou ingénierie décisionnelle.
• Spark et SQL opérationnels.
• Conception d'entrepôts de données et développement de traitements data.
• Databricks et migration vers le cloud un atout.
• Autonome, rigoureux et capable d'échanger avec les métiers.

Responsabilités

• Analyser les besoins fonctionnels et techniques des métiers.
• Qualifier et fiabiliser les données nécessaires.
• Concevoir et faire évoluer datawarehouses et datamarts.
• Développer flux d'intégration et pipelines de données.
• Réaliser nettoyage, transformation et contrôle qualité.
• Développer et optimiser des traitements Spark.
• Contribuer à la migration vers Databricks.
• Produire restitutions et tableaux de bord pour les métiers.
• Tester, documenter, déployer et maintenir en production.
• Participer aux revues de code et à l'amélioration continue.
• Accompagner les utilisateurs : ateliers, besoins, support et formation.

Outils

Spark

SQL

Databricks

Python

Hive

Informatica

Tableau Server

Git

Jenkins

Terraform

Ansible

Control-M

PL/SQL

Shell

Java

Agile

Description du poste

Data Engineer confirmé - Spark / SQL / Databricks F/H

Data Engineer confirmé - Spark / SQL / Databricks F/H 69 - Lyon 6e Arrondissement

Descriptif du poste:

Dans le cadre de l'évolution d'une plateforme décisionnelle et de sa migration progressive vers le cloud, nous recherchons un Data Engineer confirmé capable d'intervenir aussi bien sur la conception des traitements que sur la modélisation et la qualité des données. Mission de 12 mois.

Vos missions

• Recueillir et analyser les besoins fonctionnels et techniques des métiers
• Identifier, qualifier et fiabiliser les données nécessaires
• Concevoir et faire évoluer des datawarehouses et datamarts
• Développer des flux d'intégration et pipelines de données
• Réaliser les traitements de nettoyage, transformation et contrôle qualité
• Développer et optimiser des traitements Spark
• Contribuer à la migration de la plateforme data vers Databricks
• Produire des restitutions et tableaux de bord à destination des métiers
• Tester, documenter, déployer et maintenir les solutions en production
• Participer aux revues de code et à l'amélioration continue de l'architecture
• Accompagner les utilisateurs : ateliers, recueil des besoins, support et formation

Profil recherché:

Vous justifiez d'au moins 5 ans d'expérience en Data Engineering, BI ou ingénierie décisionnelle, avec une pratique réellement opérationnelle de Spark et SQL. Une expérience solide en conception d'entrepôts de données et en développement de traitements data est indispensable. La connaissance de Databricks et des problématiques de migration vers une plateforme cloud constituera un réel avantage. Au-delà de la technique, nous recherchons une personne autonome, rigoureuse, capable d'échanger directement avec les métiers, de comprendre leurs usages et de proposer des solutions adaptées.

Environnement technique

Indispensable :

• Spark
• SQL
• Modélisation décisionnelle : DWH / datamarts
• Traitement et qualité de données

Environnement complémentaire :

• Databricks
• Python
• Hive, Indexima
• Oracle, stockage objet S3 / Parquet
• Informatica
• Tableau Server
• Git, Jenkins, Ansible, Terraform
• Control-M
• PL/SQL, Shell
• Java apprécié
• Méthodes Agile

Type de contrat CDD - 12 Mois

Contrat travail Salaire

• 45 - 50 k€ brut annuel

Expérience

• 5 An(s) Cette expérience est indispensable

Informations complémentaires

• Secteur d'activité : Ingénierie,études techniques

Employeur

Que vous soyez salarié chez PRESTANOVA ou intervenant externe, vous n'êtes pas une « ressource ». Vous êtes une personne, avec une manière de travailler, une façon de penser, un potentiel. Nous prenons le temps d'écouter et de comprendre pour créer un cadre où chacun peut s'exprimer pleinement.

Notre façon de travailler :

• Un cadre clair dès le départ
• Un vrai suivi
• Une confiance avant tout
• Des projets qui ont du sens
• Des projets qui peuvent évoluer vers une embauche chez le