Senior Data Engineer Databricks H/F

Devoteam Data Driven; Lyon; On-site; EUR 55,000 - 75,000; Full time

Job summary

Devoteam Data Driven à Lyon recrute un Data Engineer passionné par la donnée et les architectures modernes. Vous concevez et déployez des pipelines robustes sur Databricks en PySpark et Spark SQL, en collaboration avec les équipes métiers et techniques.

Vous assurez la qualité du code et des données grâce à des tests, des revues de code et des pratiques DevOps. Une veille technologique et une participation active aux cérémonies agiles font partie du quotidien.

Qualifications

• Nous recherchons un Data Engineer communicatif et rigoureux, capable de vulgariser des sujets techniques.
• Bon esprit d'équipe et aptitude à travailler en méthode Agile (Scrum).
• Anglais professionnel B2 attendu.

Responsibilities

• Concevoir et construire des pipelines de données robustes sur Databricks avec PySpark et Spark SQL.
• Recueillir les besoins, participer aux ateliers de conception et optimiser les flux.
• Assurer la qualité du code et des données via tests, revues et gestion des anomalies.
• Améliorer continuellement les processus par automatisation et bonnes pratiques.
• Participer aux cérémonies agiles et maintenir une veille technologique.

Skills

Esprit d'équipe

Anglais B2

Méthodologie Agile

Rigueur et communication

Tools

Databricks

PySpark

Python

SQL

Airflow

Azure Data Factory

CI/CD & DevOps

Spark/Scala

Databricks Certification

Job description

Agence multi spécialiste composée de 350 collaborateurs répartis en communautés d’experts, Devoteam Lyon accompagne les DSI dans leur transformation digitale, avec un focus sur les nouvelles technologies comme le cloud (AWS, Microsoft Google), l'intelligence artificielle, la cybersécurité, la data, et l'automatisation des processus métiers.
Data Driven a pour ambition d’aider ses clients à transformer la valeur de leurs données en succès durable. Nous tirons parti à la fois de notre expertise sur les plateformes technologiques les plus innovantes et de notre connaissance métier avec la meilleure combinaison d’experts pour accompagner nos clients dans leur quête d’agilité, de compétitivité et de croissance durable.

Description Du Poste

Rejoignez notre équipe lyonnaise dans des projets innovants, dans un environnement propice à la formation et au développement continu. Nos clients sont des grands comptes de secteurs d'activité variés (Industrie, Transport, Logistique, Banque, Assurance, Energie...).

Vos missions :

• Concevoir et construire des pipelines de données robustes sur Databricks, en utilisant PySpark et Spark SQL.
• Recueillir les besoins, participer aux ateliers de conception et optimiser les flux de données.
• Assurer la qualité du code et des données à travers des tests techniques, des revues de code et la gestion des anomalies.
• Contribuer à l'amélioration continue des processus par l'automatisation et l'application des bonnes pratiques.
• Participer activement aux cérémonies agiles et maintenir une veille technologique constante.

Qualifications

Nous recherchons un(e) Data Engineer doté(e) d'excellentes compétences techniques et d’une bonne capacité à communiquer et à vulgariser des sujets complexes. Vous êtes reconnu(e) pour votre esprit d'équipe, votre rigueur et votre capacité à travailler en méthode Agile (Scrum). Un niveau d’anglais minimum B2 est attendu.

Compétences techniques et outils :

• Maîtrise de Databricks, PySpark, Python et SQL.
• Compétences Cloud (AWS, Azure ou GCP).
• Connaissance des environnements CI/CD et DevOps.
• Expérience en orchestration avec Airflow ou Azure Data Factory.
• Connaissance des modèles de données et des technologies Spark et Scala est un plus.
• La certification Databricks Associate ou Professionnal est appréciée.

Pourquoi nous rejoindre :

Nous sommes une AI-Driven Company, partenaire des plus grands partenaires technologiques (Google, AWS, Microsoft, ServiceNow,…) et composée d'un important collectif d'experts (50 tribus d'expertise). Avec 75% de nos collaborateurs certifiés dont 100 % sur la GenAI, Devoteam s'impose comme une Learning Company, où l’apprentissage continu est au cœur de notre ADN.

Le Groupe Devoteam oeuvre pour l'égalité des chances, pour la promotion de ses collaboratrices et de ses collaborateurs au mérite et lutte activement contre toute forme de discrimination. Nous sommes convaincus que la diversité contribue à la créativité, au dynamisme et à l'excellence de notre organisation. Chaque candidature est donc considérée indépendamment de tout critère discriminatoire.