Data Engineer

Inomexia; Boulogne-Billancourt; Presencial; EUR 52.000 - 78.000; Tempo integral

Resumo da vaga

Inomexia recherche un Data Engineer confirmé pour intégrer une équipe data de 6 personnes dans l’énergie et construire un lakehouse Databricks pour le pilotage métier. Vous fiabiliserez les données de production et de consommation et automatiserez les flux et les contrôles qualité.

Le profil doit être autonome sur la réalisation de pipelines, en Python et SQL, avec transformation des données via Spark et Databricks, modélisation Delta Lake et automation des tests/ Déploiements via Git et CI/CD.

Qualificações

• Data Engineer confirmé capable de concevoir des pipelines.
• Maîtrise Python et SQL et transformation des données.
• Expérience avec Spark/Databricks et Delta Lake.

Responsabilidades

• Développer les flux en Python et SQL.
• Transformer les données avec Spark et Databricks.
• Modéliser les tables et alimentations Delta Lake.
• Automatiser les tests et déploiements avec Git et CI/CD.

Conhecimentos

Python

SQL

Spark

Databricks

Delta Lake

Git

CI/CD

Tests de données

Azure Data Factory

Descrição da vaga

La mission

Vous intégrerez une équipe data de 6 personnes dans l’énergie. Vous construirez un lakehouse Databricks pour le pilotage métier.

• Fiabiliser les données de production et de consommation.
• Automatiser les flux et les contrôles qualité.

Votre rôle

Le profil recherché est un Data Engineer confirmé, autonome sur la réalisation de pipelines.

• Développer les flux en Python et SQL.
• Transformer les données avec Spark et Databricks.
• Modéliser les tables et alimentations Delta Lake.
• Automatiser les tests et déploiements avec Git et CI/CD.

Les compétences

• Python et SQL : maîtrisés.
• Spark et Databricks : maîtrisés.
• Delta Lake et modélisation des données : maîtrisés.
• Git, CI/CD et tests de données : maîtrisés.
• Azure Data Factory : notions.