Ingénieur Data Azure – Databricks, Data Factory, DevOps

SERA; Lyon; Sur place; EUR 45 000 - 55 000; Plein temps

Avantages offerts par ce poste

Mutuelle & Prévoyance familiales compl

Tickets restaurant (Swile)

Prime Vacances Syntec

Plan de développement des compétences

Résumé du poste

SERA Lyon recherche un Data Engineer H/F pour intervenir dans un environnement Cloud Data Warehouse sous Microsoft Azure. Vous rejoindrez une équipe travaillant sur des sujets à forts enjeux autour de la Data, du Cloud et de l’industrialisation, avec un rôle orienté Data Engineering, supervision et DevOps.

Les missions incluent la conception et l’orchestration de notebooks Databricks en PySpark, l’alimentation d’architectures Bronze/Silver/Gold, et la supervision des flux via Azure Data Factory,

Qualifications

• 7 années d'expérience professionnelle minimum en Data Engineering.
• Solide expérience en Databricks et PySpark.
• Bonne connaissance de Microsoft Azure et du DevOps.
• Expérience significative en CI/CD et automatisation.
• Maîtrise de Terraform et Jenkins.
• Bonne connaissance de Git/GitHub et des workflows CI/CD.
• Connaissance des architectures Data, IA et BI.

Responsabilités

• Concevoir, développer et orchestrer des notebooks Databricks en PySpark.
• Alimenter et exploiter une architecture Bronze / Silver / Gold.
• Manipuler et optimiser Parquet, Delta et CSV pour performance et coûts.
• Mettre en place et maintenir la supervision des flux et alerts.
• Superviser les pipelines Azure Data Factory et Jenkins.
• Collaborer avec les équipes métiers et techniques pour industrialiser les traitements.
• Gérer les repositories GitHub : branches, PR/MR, revues et CI/CD workflows.

Connaissances

Databricks

PySpark

Azure

DevOps

Terraform

Jenkins

GitHub CI/CD

Git

Spark SQL

Python

Outils

Terraform

Jenkins

GitHub

Git

Description du poste

SERA Lyon recherche un Data Engineer H/F pour intervenir dans un environnement Cloud Data Warehouse sous Microsoft Azure. Vous rejoindrez une équipe travaillant sur des sujets à forts enjeux autour de la Data, du Cloud et de l’industrialisation, avec un rôle orienté Data Engineering, supervision et DevOps.

Les missions incluent la conception et l’orchestration de notebooks Databricks en PySpark, l’alimentation d’architectures Bronze/Silver/Gold, et la supervision des flux via Azure Data Factory,