Data Engineer Spark & PySpark / Databricks (F/H)

Celad; Lyon; Hybrid; EUR 60,000 - 80,000; Full time

Benefits offered by this job

15 jours de RTT (salariés) et Rachat 1

Participation aux bénéfices

Indemnité de déplacement

Tickets restaurants 11€ / jour

Plan Epargne Entreprise

Prime de vacances

Avance sur salaire

Comité Social et Economique

Congés supplémentaires

Job summary

CELAD recrute un Data Engineer Spark & PySpark / Databricks pour son équipe Data/BI à Lyon. Vous contribuerez à faire évoluer l’architecture décisionnelle existante, développer et optimiser les traitements de données et participer à la migration vers Databricks.

Le poste combine développement, modélisation de données et échanges avec les métiers. Télétravail partiel (2–3 jours/semaine) et une expérience solide en BI ou Data Engineering sont requis.

Qualifications

• 5 ans d'expérience minimum en Data Engineering ou BI.
• Maîtrise Spark/Databricks et PySpark pour développer et optimiser les traitements.
• Bonne maîtrise de SQL et capacité à modéliser les données pour les entrepôts et datamarts.
• Connaissance de Python et/ou Java appréciée.
• Capacité à collaborer avec les équipes métier et à migrer vers Databricks.

Responsibilities

• Comprendre les besoins métier et identifier les données nécessaires.
• Concevoir et faire évoluer les modèles de données (entrepôts et datamarts).
• Développer les traitements Data via des pipelines Spark pour transformer et préparer les données.
• Améliorer qualité et performances des traitements et assurer la maintenance.
• Participer à la migration vers Databricks et assurer les déploiements.

Skills

Spark & PySpark

SQL

Python/Java

Data modelling

ETL pipelines

Tools

Databricks

Apache Spark

PySpark

Oracle

S3/Parquet

Informatica

Tableau

Git

Jenkins

Job description

2 à 3 jours de télétravail / semaine – Lyon (07) – Expérience de 5 ans minimum

Vous aimez travailler sur toute la chaîne de traitement de la donnée, de la compréhension des besoins métier jusqu’à sa restitution ?

Nous recherchons actuellement un.e Data Engineer Spark & PySpark / Databricks pour rejoindre l’équipe Data/BI de l’un de nos clients.

Votre mission : faire évoluer l’architecture décisionnelle existante, développer et optimiser les traitements de données et participer à une migration vers Databricks.

Un poste qui combine développement, modélisation de données et échanges avec les équipes métier.

Votre mission : faire évoluer la plateforme Data

Vous interviendrez sur les différentes étapes de la chaîne décisionnelle, depuis l’identification des données jusqu’à leur exploitation pour le reporting métier.

Concrètement, vous serez amené à :

• Comprendre les besoins métier : échanger avec les interlocuteurs métier, analyser leurs attentes et identifier les données nécessaires.
• Concevoir et faire évoluer les modèles de données : enrichir les entrepôts de données et les datamarts pour répondre aux besoins de reporting.
• Développer les traitements Data : concevoir des pipelines d’intégration et des traitements Spark pour transformer et préparer les données.
• Améliorer la qualité et les performances : contrôler, nettoyer les données et optimiser les traitements existants.
• Participer à la migration vers Databricks : contribuer à l’évolution de l’architecture et des traitements dans le cadre de cette migration.
• Assurer la fiabilité des développements : réaliser les tests, documenter les solutions, participer aux déploiements et assurer la maintenance.

Votre environnement technique:

Vous évoluerez dans un environnement associant technologies Big Data, bases de données et outils décisionnels.

La stack de l’équipe :

• Traitement des données : Apache Spark, Databricks, PySpark
• Bases de données et stockage : Oracle, S3, Parquet
• Intégration et reporting : Informatica, Tableau
• Gestion de code et déploiement : Git, Jenkins

Ce qui fera la différence

Vous avez déjà une expérience en BI ou en Data Engineering et vous souhaitez intervenir aussi bien sur la construction des traitements que sur l’évolution d’une architecture décisionnelle.

Pour être à l’aise sur cette mission :

• Spark & PySpark sont indispensables : vous savez les utiliser pour développer et optimiser des traitements de données.
• Vous avez une très bonne maîtrise de SQL, notamment pour manipuler, transformer et exploiter les données.
• Vous avez une expérience en modélisation de données, utile pour concevoir et faire évoluer les entrepôts de données et les datamarts.
• Vous êtes capable de comprendre les besoins métier et de les traduire en solutions techniques adaptées.
• Une connaissance de Python et/ou Java sera appréciée.
• Au-delà des compétences techniques, nous recherchons une personne rigoureuse, autonome et à l’aise dans les échanges avec les équipes métier.

Bienvenue chez CELAD – L’ingénierie à visage humain

Depuis plus de 30 ans, CELAD accompagne la réussite des projets technologiques de ses clients. Née à Toulouse en 1992, notre ESN réunit aujourd’hui plus de 1 800 collaborateurs passionnés qui mettent leur expertise et leur capacité d’innovation au service de plus de 250 clients. Grâce à notre ancrage national et à notre culture de proximité, nous intervenons dans des secteurs clés tels que l’industrie, l’énergie, la banque, la santé, les télécoms et la mobilité….

Rejoignez CELAD pour évoluer sur des projets innovants, dans une ESN à taille humaine où la proximité, la confiance et l’accompagnement vous permettent de construire votre expertise.

Notre mission ?

• Accompagner les entreprises dans leur transformation numérique,
• Le faire avec passion, engagement et respect,
• En mettant toujours l’humain au cœur du projet.

Une présence forte en région : focus sur CELAD-Agence

Basée au cœur de l’Auvergne-Rhône-Alpes, notre agence accompagne les entreprises de la région sur des projets IT et industriels à forte valeur ajoutée.

Nos consultants interviennent sur des missions en développement logiciel, systèmes embarqués, data, cloud et informatique industrielle, en autonomie ou en équipe, avec un accompagnement de proximité.

Pourquoi nous rejoindre ?

Parce qu’on ne cherche pas simplement des CV.

Parce qu’au-delà des projets, ce sont les relations humaines qui font notre force.

Chez CELAD, le management de proximité n’est pas une promesse, mais un engagement au quotidien : accompagnement individualisé, suivi régulier, perspectives d’évolution réelles… et surtout une équipe qui vous connaît et vous soutient.

Et qui l’aventure Celadienne était la vôtre ?

Vous cherchez une entreprise où votre travail a de l’impact, où vous n’êtes jamais un numéro, où votre voix compte vraiment ? Chez CELAD, on prend soin des gens autant que des projets.

Avantages à la clé :

• 15 jours de RTT (100% “salariés” & Rachat à 125%)
• Participation aux bénéfices
• Indemnité de déplacement (6€ net / jour OU 50% du titre de transport)
• Des titres restaurants d’une valeur de 11€ / jour travaillé
• Plan Epargne Entreprise
• Prime de vacances
• Avance sur salaire
• Comité Social et Economique
• Des jours de congés supplémentaires (congés ancienneté)

1. 1/ Vous postulez : chaque CV est lu (pas de filtre automatique chez nous !)
2. 2/ Premier contact : un coup de fil rapide pour voir si on part sur de bonnes bases
3. 3/ Premier entretien : on parle de vous, de vos compétences, de vos projets et on vous ouvre les coulisses de CELAD
4. 4/ Rencontre Business Manager : on plonge dans le concret, la mission, l’équipe, les défis…
5. 5/ Décision : si on se dit “go”, on vous fait une offre et on prépare ensemble votre arrivée