Ingénieur DATA

Groupe LR Technologies; Lyon; On-site; EUR 52,000 - 86,000; Full time

Job summary

LR Technologies Groupe, basé à Lyon, recherche un ingénieur Data expérimenté pour concevoir et déployer des pipelines de données avec Python, PySpark et Databricks.

Vous alimenterez et maintiendrez une architecture Data Lake Bronze, Silver et Gold, optimisant les traitements et assurant la qualité des données et le suivi des coûts. Une expérience cloud Azure et des pratiques CI/CD (Jenkins, GitHub) sont appréciées.

Qualifications

• Formation supérieure en ingénierie ou équivalent, expérience significative en ingénierie data.
• Maîtrise de Python, PySpark, SQL et Databricks.
• Connaissances en CI/CD et déploiement cloud (Terraform/Jenkins/GitHub).

Responsibilities

• Concevoir et développer des pipelines de données avec Python, PySpark et Databricks.
• Alimenter et maintenir une architecture Data Lake Bronze/Silver/Gold.
• Optimiser les traitements pour performance, qualité des données et coûts.
• Superviser les flux et mettre en place monitoring et alerting.
• Participer à l’industrialisation de la plateforme et à la doc technique.

Skills

Python

PySpark

SQL

Data engineering

Cloud data platforms

Education

Diplôme d'ingénieur ou équivalent en data/informatique

Tools

Databricks

Azure

Power BI

Terraform

Jenkins

GitHub

Job description

Bienvenue chez LR Technologies Rhône-Alpes

« Toutes les Sociétés de Conseil se ressemblent », Toutes ?

LR TECHNOLOGIES GROUPE c'est600 Libelliensqui nous ont élusGreat Place To Work en 2016, 2018 et à présent 3e France et Europe 2021. Nous sommes également la 99e société française labellisée B CORP pour notre engagement RSE.

Depuis 2014 nous avons créé 11 implantations et 5 pôles d'activités complémentaires :

- Aéronautique / Spatial / Défense

- Drone / Robotique / IoT / Automobile/ Ferroviaire / Industries / Multimédia

- Médical / Pharmaceutique

- Énergie / Environnement

- Systèmes d'Informations / Banque / Finance / Assurance

Missions

• Concevoir et développer des pipelines de données avec Python, PySpark et Databricks.

• Alimenter et maintenir une architecture Data Lake organisée en couches Bronze, Silver et Gold.

• Optimiser les traitements existants en matière de performance, de qualité des données et de coûts.

• Superviser les flux de données et mettre en place des mécanismes de monitoring et d’alerting.

• Participer à la fiabilisation et à l’industrialisation de la plateforme Data.

• Maintenir et faire évoluer l’infrastructure Cloud avec Terraform.

• Développer et maintenir les pipelines CI/CD avec Jenkins et GitHub.

• Contribuer aux études techniques, aux préconisations d’architecture et à la documentation.

Environnement technique :

• Cloud & Data : Azure, Databricks, Azure Data Factory, Azure Storage, Azure Key Vault, Power BI.

• Développement : Python, PySpark, SQL, Spark SQL.

• Data Engineering : Delta Lake, Parquet, CSV.

• DevOps & CI/CD : Terraform, Jenkins, GitHub, Git, pipelines de déploiement.

Profil

De formation supérieure, vous justifiez d'une expérience significative en tant qu'ingénieur Data avec une bonne maîtrise de Python, PySpark, SQL et Databricks.