Data Engineer – Lakehouse Databricks, Spark & CI/CD

Inomexia; Boulogne-Billancourt; Presencial; EUR 52.000 - 78.000; Tempo integral

Resumo da vaga

Inomexia recherche un Data Engineer confirmé pour intégrer une équipe data de 6 personnes dans l’énergie et construire un lakehouse Databricks pour le pilotage métier. Vous fiabiliserez les données de production et de consommation et automatiserez les flux et les contrôles qualité.

Le profil doit être autonome sur la réalisation de pipelines, en Python et SQL, avec transformation des données via Spark et Databricks, modélisation Delta Lake et automation des tests/ Déploiements via Git et CI/CD.

Qualificações

• Data Engineer confirmé capable de concevoir des pipelines.
• Maîtrise Python et SQL et transformation des données.
• Expérience avec Spark/Databricks et Delta Lake.

Responsabilidades

• Développer les flux en Python et SQL.
• Transformer les données avec Spark et Databricks.
• Modéliser les tables et alimentations Delta Lake.
• Automatiser les tests et déploiements avec Git et CI/CD.

Conhecimentos

Python

SQL

Spark

Databricks

Delta Lake

Git

CI/CD

Tests de données

Azure Data Factory

Descrição da vaga

Inomexia recherche un Data Engineer confirmé pour intégrer une équipe data de 6 personnes dans l’énergie et construire un lakehouse Databricks pour le pilotage métier. Vous fiabiliserez les données de production et de consommation et automatiserez les flux et les contrôles qualité.

Le profil doit être autonome sur la réalisation de pipelines, en Python et SQL, avec transformation des données via Spark et Databricks, modélisation Delta Lake et automation des tests/ Déploiements via Git et CI/CD.