Senior Data Engineer Databricks H/F

Devoteam Data Driven

Lyon

On-site

EUR 60,000 - 90,000

Full time

16 hours ago
Be an early applicant

A complete application in a minute

Tailored resume and cover letter, ready to send.

Get past ATS filters

Job summary

Devoteam Data Driven Lyon recherche un Data Engineer pour concevoir et déployer des pipelines de données robustes sur Databricks, avec PySpark et Spark SQL. Vous collectez les besoins, participez aux ateliers et optimisez les flux de données, tout en assurant la qualité du code et des données via tests et revues.

Vous contribuerez à l’amélioration continue des processus par l’automatisation et les bonnes pratiques, et participerez activement aux cérémonies agiles.

Qualifications

  • Maîtrise Databricks, PySpark, Python et SQL.
  • Expérience cloud (AWS/Azure/GCP).
  • Connaissance CI/CD et DevOps.
  • Expérience orchestration Airflow ou Azure Data Factory.
  • Connaissance des modèles de données et Spark/Scala est un plus.
  • La certification Databricks Associate ou Professional est appréciée.
  • Niveau d’anglais minimum B2.

Responsibilities

  • Concevoir et construire des pipelines de données robustes sur Databricks, en utilisant PySpark et Spark SQL.
  • Recueillir les besoins, participer aux ateliers de conception et optimiser les flux de données.
  • Assurer la qualité du code et des données via tests, revues et gestion des anomalies.
  • Contribuer à l’amélioration continue des processus par l’automatisation et les bonnes pratiques.
  • Participer activement aux cérémonies agiles et maintenir une veille technologique.

Skills

Databricks
PySpark
Python
SQL
AWS
Azure
GCP
Agile
Anglais B2

Tools

Airflow
Azure Data Factory
CI/CD
DevOps
Spark
Scala

Job description

Agence multi spécialiste composée de 350 collaborateurs répartis en communautés d’experts, Devoteam Lyon accompagne les DSI dans leur transformation digitale, avec un focus sur les nouvelles technologies comme le cloud (AWS, Microsoft Google), l'intelligence artificielle, la cybersécurité, la data, et l'automatisation des processus métiers.

Data Driven a pour ambition d’aider ses clients à transformer la valeur de leurs données en succès durable. Nous tirons parti à la fois de notre expertise sur les plateformes technologiques les plus innovantes et de notre connaissance métier avec la meilleure combinaison d’experts pour accompagner nos clients dans leur quête d’agilité, de compétitivité et de croissance durable.

Description Du Poste

Rejoignez notre équipe lyonnaise dans des projets innovants, dans un environnement propice à la formation et au développement continu. Nos clients sont des grands comptes de secteurs d'activité variés (Industrie, Transport, Logistique, Banque, Assurance, Energie...).

Vos missions :
  • Concevoir et construire des pipelines de données robustes sur Databricks, en utilisant PySpark et Spark SQL.
  • Recueillir les besoins, participer aux ateliers de conception et optimiser les flux de données.
  • Assurer la qualité du code et des données à travers des tests techniques, des revues de code et la gestion des anomalies.
  • Contribuer à l'amélioration continue des processus par l'automatisation et l'application des bonnes pratiques.
  • Participer activement aux cérémonies agiles et maintenir une veille technologique constante.
Qualifications

Nous recherchons un(e) Data Engineer doté(e) d'excellentes compétences techniques et d’une bonne capacité à communiquer et à vulgariser des sujets complexes. Vous êtes reconnu(e) pour votre esprit d'équipe, votre rigueur et votre capacité à travailler en méthode Agile (Scrum). Un niveau d’anglais minimum B2 est attendu.

Compétences techniques et outils :
  • Maîtrise de Databricks, PySpark, Python et SQL.
  • Compétences Cloud (AWS, Azure ou GCP).
  • Connaissance des environnements CI/CD et DevOps.
  • Expérience en orchestration avec Airflow ou Azure Data Factory.
  • Connaissance des modèles de données et des technologies Spark et Scala est un plus.
  • La certification Databricks Associate ou Professionnal est appréciée.
Pourquoi nous rejoindre :

Nous sommes une AI-Driven Company, partenaire des plus grands partenaires technologiques (Google, AWS, Microsoft, ServiceNow,) et composée d'un important collectif d'experts (50 tribus d'expertise). Avec 75% de nos collaborateurs certifiés dont 100 % sur la GenAI, Devoteam s'impose comme une Learning Company, où l’apprentissage continu est au cœur de notre ADN.

Informations supplémentaires

Comment se déroule le processus de recrutement chez Devoteam ? Il comporte 2 à 3 entretiens :

  • Talent Acquisition Interview : l'objectif est de faire le point sur vos compétences, votre niveau d'anglais et de valider vos éléments de motivation
  • Tech & Business Interview : cet entretien vise à approfondir vos compétences techniques et à vérifier leur adéquation avec nos besoins lors d'un échange avec un expert métier
  • Leadership Interview : il permet d'évaluer votre potentiel, vos ambitions et d'envisager votre évolution au sein de Devoteam.

Nous privilégi...

Get your free, confidential resume review.

or drag and drop your file here.

Similar jobs

Similar jobs worth comparing

Analytics engineer F/H
Analytics engineer F/H

Devoteam • Marcq-en-Barœul

On-site
EUR 45,000 - 65,000
Data Engineer F/H migration Databricks
Data Engineer F/H migration Databricks

Devoteam Data Driven • Lyon

On-site
EUR 40,000 - 45,000
Formations et certifications
Ambiance de travail collaborative
Analytics engineer F/H
Analytics engineer F/H

Devoteam • Marcq

On-site
EUR 55,000 - 75,000
Analytics engineer F/H
Analytics engineer F/H

Devoteam • Hauts-de-France

On-site
EUR 48,000 - 72,000
Senior Data Engineer Spark - Scala F/H
Senior Data Engineer Spark - Scala F/H

Devoteam Data Driven • Lyon

On-site
EUR 45,000 - 55,000
Environnement d'apprentissage continu
Certifications professionnelles
Accès à des technologies innovantes
Data Engineer
Data Engineer

Devoteam Data Driven • Levallois-Perret

On-site
EUR 50,000 - 70,000
Data Architect / Squad Leader Data F/H
Data Architect / Squad Leader Data F/H

Devoteam • Lyon

On-site
EUR 90,000 - 120,000
Data Engineer Spark / Databricks H/F
Data Engineer Spark / Databricks H/F

Devoteam • Pays de la Loire

On-site
EUR 55,000 - 75,000
Data Architect / Squad Leader Data F/H
Data Architect / Squad Leader Data F/H

Devoteam • Auvergne-Rhône-Alpes

On-site
EUR 90,000 - 130,000
Data Engineer Spark / Databricks H/F
Data Engineer Spark / Databricks H/F

Devoteam • Nantes

On-site
EUR 55,000 - 85,000