Vacancy Senior Data Engineer (Overheid) (Brussel) 01-09-2026

ENTICO ICT; Belgique; À distance; EUR 60 000 - 90 000; Plein temps

Résumé du poste

ENTICO ICT recherche un ingénieur Data/Platform pour construire une plateforme de données on-premise pour le Ministère de la Défense Belge. Vous rejoindrez la Sierra Team et travaillerez aux côtés d’un Data Architect et d’un Solution Architect.

Vos missions couvrent l’ingestion, la transformation, la gouvernance et l’exposition des données, avec une forte emphase sur la sécurité et la traçabilité des pipelines multi-domaines.

Qualifications

• Maîtrise approfondie de Python et SQL pour construire des pipelines et des transformations.
• Expérience confirmée avec dbt-core (modèles, snapshots, macros, tests, profils).
• Bonne connaissance de Delta Lake et des transactions ACID dans un environnement lakehouse.
• Maîtrise de bases relationnelles MSSQL et PostgreSQL, avec CDC et SQL avancé.
• Expérience avec un orchestrateur de données (Dagster, Airflow ou équivalent).
• Connaissance d’OpenMetadata ou DataHub pour la gouvernance et le lignage.
• Expérience BI et exposition des données via outils BI (Power BI Report Server; Apache Superset).
• Connaissance des environnements Linux/OpenShift et PowerShell.
• Connaissance des concepts Lakehouse, DWH et Datalake.
• Expérience avec Kafka/Debezium pour la capture de données en temps réel.

Responsabilités

• Concevoir et déployer des pipelines d’ingestion depuis sources hétérogènes (fichiers, APIs, bases relationnelles).
• Implémenter l’ingestion incrémentale et en streaming, assurer fiabilité et traçabilité.
• Développer les modèles de transformation sur Bronze/Silver/Gold (architecture medallion) et historique des données.
• Déployer les exports vers Delta Lake et maintenir les tables Delta Lake.
• Garantir la cohérence transactionnelle dans un multi-domaines et orchestrer les assets.
• Monitorer les runs, détecter les erreurs et automatiser les alertes.
• Exposer la couche Gold via des endpoints et collaborer avec les équipes BI.

Connaissances

Python

SQL

dbt-core

DuckDB

Delta Lake

MSSQL

PostgreSQL

Dagster

Airflow

Linux/OpenShift

PowerShell

DataHub

OpenMetadata

BI development

Kafka

Debezium

Spark

PBIRS

Apache Superset

Outils

Dagster

Airflow

Description du poste

Dans le cadre du programme DEP (Data Exchange Platform), nous construisons une plateforme de données on-premise pour le Ministère de la Défense Belge. La plateforme doit répondre à des exigences strictes de sécurité, de gouvernance et de souveraineté des données.

Vous rejoindrez la Sierra Team et travaillerez aux côtés d'un Data Architect, d'un Solution Architect et un BI developer.

Vos missions principales

Ingestion & pipelines de données

• Concevoir et déployer des pipelines d'ingestion depuis des sources hétérogènes : fichiers , APIs, bases relationnelles.
• Implémenter des pipelines pour l'ingestion incrémentale et en streaming.
• Assurer la fiabilité, l'idempotenceet la traçabilité de chaque pipeline.

Transformation & couche sémantique

• Développer les modèles de transformationsur les couches Bronze, Silver et Gold. (Architecture medallion)
• Implémenter les bonnes pratiques d'historisations de données (ex: SCD2, upsert, append only,...).
• Développer les exports vers Delta Lake
• Gérer et maintenir les tables Delta Lake.
• Garantir la cohérence transactionnelle des données dans un environnement multi-domaines.
• Implémenter et maintenir les assests à orchestrer.
• Monitorer les runs, gérer les erreurs et automatiser les alertes.

Gouvernance & lignage

• Pousser les métadonnées techniques et business vers la plateforme de data.
• Maintenir le lignage de bout en bout.
• Contribuer à la rédaction des DUA, SLA et documents de gouvernance associés.

Exposition des données

• Développer des endpoints pour exposer la couche Gold aux Dashboards BI.
• Collaborer avec les équipes reporting pour l'alimentation des dashboards BI

Profil recherché

Compétences techniques requises

• Maîtrise de Python
• Maîtrise du SQL
• Expérience confirmée avec dbt-core (modèles, snapshots, macros, tests, profils).
• Bonne connaissance de DuckDB comme moteur de requête analytique embarqué.
• Expérience avec Delta Lake (transactions ACID, time travel, OPTIMIZE/VACUUM, ...).
• Connaissance des bases relationnelles : MSSQL, PostgreSQL (SQL avancé, CDC).
• Expérience avec un orchestrateur de données : Dagster, Airflow ou équivalent.
• À l'aise sur Linux/OpenShift et ing PowerShell (Windows dev environment).
• Familiarité avec les outils de gouvernance : DataHub, OpenMetadata ou équivalent.
• Expérience dans le développement BI.

Compétences appréciées

• Expérience Kafka/Debezium pour la capture de données en temps réel.
• Connaissance de Spark (Spark SQL, Thrift Server, Beeline).
• Expérience avec Power BI Report Server (PBIRS) ou Apache Superset.
• Sensibilité à la sécurité des données dans des environnements à accès restreint.
• Avoir des connaissance des concepts Lakehouse (architecture Medallion), DWH et Datalake

Savoir-être

• Rigueur et autonomie dans la gestion de pipelines complexes multi-domaines.
• Capacité à documenter les décisions techniques et à vulgariser pour des interlocuteurs non-techniques.
• Esprit d'équipe.
• Etre curieux et avoir un esprit orienté solution

Ce que nous offrons

• Une mission stable qui s'inscrit dans la durée.
• Un projet à fort impact dans un environnement sécurisé et techniquement stimulant.
• Une équipe expérimentée et bienveillante, orientée qualité et bonnes pratiques.
• Des opportunités de montée en compétences sur la gouvernance, l'orchestration et le lakehouse.

Compte tenu de la nature des activités, le candidat doit posséder la nationalité belge.