Ingénieur Data — Pipelines & Cloud sur Databricks Azure

Groupe LR Technologies; Lyon; Presencial; EUR 55.000 - 85.000; Jornada completa

Descripción de la vacante

LR Technologies Rhône-Alpes recherche un(e) ingénieur Data pour concevoir et développer des pipelines de données avec Python, PySpark et Databricks, et alimenter un Data Lake en couches Bronze, Silver et Gold.

Vous optimiserez les traitements, superviserez les flux et assurerez la fiabilisation de la plateforme Data. Vous maintiendrez l’infrastructure Cloud avec Terraform et développerez les pipelines CI/CD avec Jenkins et GitHub.

Formación

• Expérience significative en ingénieur Data.
• Bonne maîtrise de Python, PySpark et SQL.
• Connaissance de Databricks et des pipelines CI/CD.

Responsabilidades

• Concevoir et développer des pipelines de données avec Python, PySpark et Databricks.
• Alimenter et maintenir un Data Lake en Bronze, Silver et Gold.
• Optimiser les traitements en matière de performance et de coûts.
• Superviser les flux de données et mettre en place le monitoring et l’alerting.
• Participer à l’industrialisation de la plateforme Data et à la documentation technique.

Conocimientos

Python

PySpark

SQL

Databricks

Educación

Diplôme d'ingénieur Data / Informatique

Herramientas

Azure Databricks

Azure Data Factory

Terraform

Jenkins

GitHub

Power BI

Descripción del empleo

LR Technologies Rhône-Alpes recherche un(e) ingénieur Data pour concevoir et développer des pipelines de données avec Python, PySpark et Databricks, et alimenter un Data Lake en couches Bronze, Silver et Gold.

Vous optimiserez les traitements, superviserez les flux et assurerez la fiabilisation de la plateforme Data. Vous maintiendrez l’infrastructure Cloud avec Terraform et développerez les pipelines CI/CD avec Jenkins et GitHub.