Data Engineer Spark & PySpark — Databricks

Celad; Lyon; Hybrid; EUR 60,000 - 80,000; Full time

Benefits offered by this job

15 jours de RTT (salariés) et Rachat 1

Participation aux bénéfices

Indemnité de déplacement

Tickets restaurants 11€ / jour

Plan Epargne Entreprise

Prime de vacances

Avance sur salaire

Comité Social et Economique

Congés supplémentaires

Job summary

CELAD recrute un Data Engineer Spark & PySpark / Databricks pour son équipe Data/BI à Lyon. Vous contribuerez à faire évoluer l’architecture décisionnelle existante, développer et optimiser les traitements de données et participer à la migration vers Databricks.

Le poste combine développement, modélisation de données et échanges avec les métiers. Télétravail partiel (2–3 jours/semaine) et une expérience solide en BI ou Data Engineering sont requis.

Qualifications

• 5 ans d'expérience minimum en Data Engineering ou BI.
• Maîtrise Spark/Databricks et PySpark pour développer et optimiser les traitements.
• Bonne maîtrise de SQL et capacité à modéliser les données pour les entrepôts et datamarts.
• Connaissance de Python et/ou Java appréciée.
• Capacité à collaborer avec les équipes métier et à migrer vers Databricks.

Responsibilities

• Comprendre les besoins métier et identifier les données nécessaires.
• Concevoir et faire évoluer les modèles de données (entrepôts et datamarts).
• Développer les traitements Data via des pipelines Spark pour transformer et préparer les données.
• Améliorer qualité et performances des traitements et assurer la maintenance.
• Participer à la migration vers Databricks et assurer les déploiements.

Skills

Spark & PySpark

SQL

Python/Java

Data modelling

ETL pipelines

Tools

Databricks

Apache Spark

PySpark

Oracle

S3/Parquet

Informatica

Tableau

Git

Jenkins

Job description

CELAD recrute un Data Engineer Spark & PySpark / Databricks pour son équipe Data/BI à Lyon. Vous contribuerez à faire évoluer l’architecture décisionnelle existante, développer et optimiser les traitements de données et participer à la migration vers Databricks.

Le poste combine développement, modélisation de données et échanges avec les métiers. Télétravail partiel (2–3 jours/semaine) et une expérience solide en BI ou Data Engineering sont requis.