Ingénieur DATA H/F

Groupe LR Technologies; Lyon; On-site; EUR 55,000 - 85,000; Full time

Job summary

LR Technologies Rhône-Alpes recherche un(e) ingénieur Data pour concevoir et développer des pipelines de données avec Python, PySpark et Databricks, et alimenter un Data Lake en couches Bronze, Silver et Gold.

Vous optimiserez les traitements, superviserez les flux et assurerez la fiabilisation de la plateforme Data. Vous maintiendrez l’infrastructure Cloud avec Terraform et développerez les pipelines CI/CD avec Jenkins et GitHub.

Qualifications

• Expérience significative en ingénieur Data.
• Bonne maîtrise de Python, PySpark et SQL.
• Connaissance de Databricks et des pipelines CI/CD.

Responsibilities

• Concevoir et développer des pipelines de données avec Python, PySpark et Databricks.
• Alimenter et maintenir un Data Lake en Bronze, Silver et Gold.
• Optimiser les traitements en matière de performance et de coûts.
• Superviser les flux de données et mettre en place le monitoring et l’alerting.
• Participer à l’industrialisation de la plateforme Data et à la documentation technique.

Skills

Python

PySpark

SQL

Databricks

Education

Diplôme d'ingénieur Data / Informatique

Tools

Azure Databricks

Azure Data Factory

Terraform

Jenkins

GitHub

Power BI

Job description

Bienvenue chez LR Technologies Rhône-Alpes

« Toutes les Sociétés de Conseil se ressemblent », Toutes ?

LR TECHNOLOGIES GROUPE c'est600 Libelliensqui nous ont élusGreat Place To Work en 2016, 2018 et à présent 3e France et Europe 2021. Nous sommes également la 99e société française labellisée B CORP pour notre engagement RSE.

Depuis 2014 nous avons créé 11 implantations et 5 pôles d'activités complémentaires :

• Aéronautique / Spatial / Défense
• Drone / Robotique / IoT / Automobile/ Ferroviaire / Industries / Multimédia
• Médical / Pharmaceutique
• Énergie / Environnement
• Systèmes d'Informations / Banque / Finance / Assurance

MISSIONS

• Concevoir et développer des pipelines de données avec Python, PySpark et Databricks.
• Alimenter et maintenir une architecture Data Lake organisée en couches Bronze, Silver et Gold.
• Optimiser les traitements existants en matière de performance, de qualité des données et de coûts.
• Superviser les flux de données et mettre en place des mécanismes de monitoring et d’alerting.
• Participer à la fiabilisation et à l’industrialisation de la plateforme Data.
• Maintenir et faire évoluer l’infrastructure Cloud avec Terraform.
• Développer et maintenir les pipelines CI/CD avec Jenkins et GitHub.
• Contribuer aux études techniques, aux préconisations d’architecture et à la documentation.

Environnement technique :

• Cloud & Data : Azure, Databricks, Azure Data Factory, Azure Storage, Azure Key Vault, Power BI.
• Développement : Python, PySpark, SQL, Spark SQL.
• Data Engineering : Delta Lake, Parquet, CSV.
• DevOps & CI/CD : Terraform, Jenkins, GitHub, Git, pipelines de déploiement.

PROFIL

De formation supérieure, vous justifiez d'une expérience significative en tant qu'ingénieur Data avec une bonne maîtrise de Python, PySpark, SQL et Databricks.