Data Engineer Opérationnel – Pipelines & Azure Databricks

AURO CLIC - AURO CLIC; Brussel Hoofdstad; Sur place; EUR 70 000 - 90 000; Plein temps

Résumé du poste

AURO CLIC recherche un Data Engineer opérationnel pour soutenir l’équipe Digital & Data dans un client belge du secteur énergétique. Vous contribuerez à l’intégration des données, à la BI et à l’analytique, avec une organisation Agile et une gouvernance des données.

Vous concevrez et déploierez des pipelines, structurerez les stockages et fournirez des données fiables et réutilisables pour les métiers, tout en renforçant les pratiques DevOps et la documentation technique.

Qualifications

• Expérience significative dans un poste similaire.
• Maîtrise de SQL Server : utilisation concrète dans des projets de données.
• Connaissances avancées des Pipelines Azure : Azure Databricks en priorité ; Azure Data Factory, Azure Functions, Azure Stream/Log Analytics et Azure DevOps.
• Maîtrise de Python dans Databricks : création de pipelines ou enrichissement de données.
• Ouverture aux nouvelles technologies : capacité à apprendre Redis, RabbitMQ, Neo4j ou Apache Arrow.
• Français courant ou Néerlandais courant ou Allemand Courant.
• Anglais courant

Responsabilités

• Concevoir, développer et faire évoluer des pipelines de collecte, de transformation et d’enrichissement des données.
• Construire des structures de stockage efficaces et des vues matérialisées adaptées aux usages analytiques.
• Mettre à disposition des points d’échange de données pour les utilisateurs et les applications.
• Développer des traitements Python dans Databricks et mobiliser les services Azure pertinents.
• Échanger avec les business analysts et les parties prenantes pour préciser les besoins et proposer des solutions intégrées et réutilisables.
• Contribuer aux tests approfondis des solutions et au renforcement des pratiques DevOps.
• Rédiger et structurer la documentation technique.
• Intervenir, selon les besoins, sur le glossaire, la modélisation, la traçabilité des données et la qualité des données.

Connaissances

SQL Server

Python

Anglais courant

Français courant

Néerlandais courant

Allemand courant

Outils

Azure Databricks

Azure Data Factory

Azure Functions

Azure Stream Analytics

Redis

RabbitMQ

Neo4j

Apache Arrow

Description du poste

AURO CLIC recherche un Data Engineer opérationnel pour soutenir l’équipe Digital & Data dans un client belge du secteur énergétique. Vous contribuerez à l’intégration des données, à la BI et à l’analytique, avec une organisation Agile et une gouvernance des données.

Vous concevrez et déploierez des pipelines, structurerez les stockages et fournirez des données fiables et réutilisables pour les métiers, tout en renforçant les pratiques DevOps et la documentation technique.