Senior Data Engineer Databricks H/F

Devoteam Data Driven France; Lyon; Sur place; EUR 40 000 - 55 000; Plein temps

Résumé du poste

Une entreprise innovante à Lyon recherche un Data Engineer pour concevoir des pipelines de données robustes et optimiser les flux de données. Vous devez maîtriser Databricks, PySpark, Python et SQL, et avoir une connaissance en Cloud (AWS, Azure ou GCP). Le candidat devra aussi avoir un niveau B2 en anglais et être capable de travailler en méthode Agile. Ce poste offre un environnement axé sur l'apprentissage continu et l'innovation.

Prestations

Formation continue

Travail sur des projets variés

Environnement collaboratif

Qualifications

• Excellentes compétences techniques et capacité à communiquer des sujets complexes.
• Reconnu pour votre esprit d'équipe et votre rigueur.
• Capacité à travailler en méthode Agile (Scrum).
• Niveau d'anglais minimum B2 requis.

Responsabilités

• Concevoir et construire des pipelines de données sur Databricks.
• Recueillir les besoins et optimiser les flux de données.
• Assurer la qualité du code et des données.
• Contribuer à l'amélioration continue et à l'automatisation.
• Participer aux cérémonies agiles et maintenir une veille technologique.

Connaissances

Databricks

PySpark

Python

SQL

AWS

Azure

GCP

Airflow

Azure Data Factory

Modèles de données

Technologies Spark

Scala

Description du poste

Description du poste

Rejoignez notre équipe lyonnaise dans des projets innovants, dans un environnement propice à la formation et au développement continu.Nos clients sont des grands comptes de secteurs d'activité variés (Industrie, Transport, Logistique, Banque, Assurance, Energie...).

Vos missions :

Concevoir et construire des pipelines de données robustes sur Databricks , en utilisant PySpark et Spark SQL .

Recueillir les besoins, participer aux ateliers de conception et optimiser les flux de données.

Assurer la qualité du code et des données à travers des tests techniques, des revues de code et la gestion des anomalies.

Contribuer à l'amélioration continue des processus par l'automatisation et l'application des bonnes pratiques.

Participer activement aux cérémonies agiles et maintenir une veille technologique constante.

Qualifications

Nous recherchons un(e) Data Engineer doté(e) d'excellentes compétences techniques et d’une bonne capacité à communiquer et à vulgariser des sujets complexes. Vous êtes reconnu(e) pour votre esprit d'équipe, votre rigueur et votre capacité à travailler en méthode Agile (Scrum). Un niveau d’anglais minimum B2 est attendu.

Compétences techniques et outils :

Maîtrise de Databricks , PySpark , Python et SQL .

Compétences Cloud (AWS, Azure ou GCP).

Connaissance des environnements CI / CD et DevOps .

Expérience en orchestration avec Airflow ou Azure Data Factory .

Connaissance des modèles de données et des technologies Spark et Scala est un plus.

La certification Databricks Associate ou Professionnal est appréciée.

Pourquoi nous rejoindre :

Nous sommes une AI-Driven Company, partenaire des plus grands partenaires technologiques (Google, AWS, Microsoft, ServiceNow,…) et composée d'un important collectif d'experts (50 tribus d'expertise). Avec 75% de nos collaborateurs certifiés dont 100 % sur la GenAI, Devoteam s'impose comme une Learning Company, où l’apprentissage continu est au cœur de notre ADN.

Informations supplémentaires

Comment se déroule le processus de recrutement chez Devoteam ? Il comporte 2 à 3 entretiens :

• Talent Acquisition Interview : l'objectif est de faire le point sur vos compétences, votre niveau d'anglais et de valider vos éléments de motivation
• Tech & Business Interview : cet entretien vise à approfondir vos compétences techniques et à vérifier leur adéquation avec nos besoins lors d'un échange avec un expert métier
• Leadership Interview : il permet d'évaluer votre potentiel, vos ambitions et d'envisager votre évolution au sein de Devoteam.

Nous privilégions au moins un entretien en présentiel. Une prise de référence est demandée et, selon votre profil, des tests (techniques, anglais, personnalité...) peuvent vous être adressés.

Si votre candidature est retenue, nous vous faisons parvenir une proposition présentant les conditions d'embauche. En cas d'acceptation, le contrat de travail est formalisé.

Le Groupe Devoteam oeuvre pour l'égalité des chances, pour la promotion de ses collaboratrices et de ses collaborateurs au mérite et lutte activement contre toute forme de discrimination. Nous sommes convaincus que la diversité contribue à la créativité, au dynamisme et à l'excellence de notre organisation. Chaque candidature est donc considérée indépendamment de tout critère discriminatoire.