Data Engineer

Atelier Informatique; Brussel Hoofdstad; On-site; EUR 65,000 - 90,000; Full time

Job summary

Atelier Informatique à Bruxelles recrute un data engineer BI doté d'un profil DevOps pour renforcer l'équipe de développement et assurer la fiabilité des données et des rapports.

Le candidat travaillera avec SAS, Power BI et Apache Superset, et participera à l'évolution de la plateforme de données, tout en garantissant traçabilité, qualité et sécurité des données.

Qualifications

• Diplôme de master ou bachelor en ICT ou équivalent.
• Au moins 5 ans d'expérience dans la data engineering, le stockage de données ou la BI, avec expérience CI/CD.

Responsibilities

• Exigences et normes — rôle de passerelle vers les flux de données et le reporting.
• Traduire les normes en exigences fonctionnelles et techniques.
• Collaborer avec le Product Owner pour recenser les besoins et les convertir en user stories.
• Définir les définitions des données et KPI afin que le calcul soit uniforme.
• Gérer CI/CD pour les pipelines de données, versioning, tests et releases.
• Mettre en place surveillance et alertes pour les chargements de données.
• Contribuer à la traçabilité des données et documenter les modèles et flux.

Skills

DevOps BI

CI/CD

Data modeling

Git

Reporting

Education

Master ou Bachelor ICT

Tools

SAS Visual Analytics

Power BI

Apache Superset

Job description

Consultancy | Atelier Informatique | Belgium

Aucun

Aucun

Bruxelles

Bruxelles-Capitale, Région de

L'équipe de développement de la plateforme se renforce avec un data engineer doté d'un solide profil DevOps dans le domaine de la BI. Cette personne fait partie de l'équipe de développement et fait le lien entre les exigences (normes, directives et besoins d'information du business) et ce qui est livré sur le plan technique.

Le data engineer traduit les normes et les demandes en exigences claires, veille à la qualité des données tout au long de la chaîne et s'assure que les données, de la source au rapport, sont fiables, vérifiables et reproductibles. Dans ce cadre, les principes DevOps sont appliqués à la BI : tout est en gestion de version, testé de manière automatisée et déployé de manière contrôlée.

Ce profil n'est pas lié à une technologie en particulier : le data engineer travaille avec l'environnement existant (notamment SAS) et participe à la réflexion sur l'évolution de la plateforme de données.

Cette priorité accordée à des données fiables, bien définies et de qualité fait également de ce profil un facilitateur important pour l'IA. Des applications telles que l'analyse prédictive, la classification automatique ou l'assistance par l'IA dans le traitement des dossiers dépendent entièrement de la qualité, de la traçabilité et de l'accessibilité des données sous-jacentes. C'est le data engineer qui en pose les bases.

4. Principales responsabilités :

• Exigences et normes — rôle de passerelle
• Traduire les normes, standards et directives (architecture, sécurité de l'information, RGPD, politiques IT internes) en exigences fonctionnelles et techniques concrètes concernant les flux de données et le reporting
• En collaboration avec le Product Owner et les analystes fonctionnels, recenser les besoins en informations et les traduire en user stories assorties de critères d'acceptation clairs
• Définir de manière univoque les définitions des données et les KPI (dictionnaire de données, couche sémantique), afin que chaque KPI soit calculé de la même manière partout
• Être la personne de référence au sein de l'équipe pour les questions relatives aux données et à la BI, et assurer la coordination avec les développeurs, les architectes, les testeurs et les stakeholders
• Qualité des données
• Élaborer, automatiser et assurer le suivi de règles de qualité des données (exhaustivité, exactitude, actualité, cohérence)
• Intégrer des contrôles dans les processus de chargement; détecter les anomalies, les signaler et en assurer le suivi jusqu'à leur résolution
• Consigner la traçabilité et documenter des modèles de données, des flux de données et des processus
• Rendre compte de la qualité des données à l'équipe, au Product Owner et à la direction
• Mettre en place et gérer la CI/CD pour les pipelines de données, les modèles de données et les rapports: gestion des versions (Git), revues de code, tests automatisés et releases contrôlées dans les environnements de développement, de test et de production
• Mettre en place un système de surveillance et d'alerte pour les processus batch et les chargements de données
• Participer au suivi des quality gates pour le code de données et les rapports
• Assurer la gestion des releases et des modifications, et participer à la résolution des incidents
• Développer et assurer la maintenance de processus ETL/ELT
• Prévoir une couche de publication fiable pour les outils de BI (notamment SAS Visual Analytics, Power BI, Apache Superset )
• Participer à la réflexion sur l'évolution de la plateforme de données et, lorsque cela s'avère pertinent, rendre la logique indépendante de l'outil
• Préparer les données pour l'IA: veiller à ce que les ensembles de données soient bien documentés, de haute qualité et accessibles en toute sécurité, afin qu'ils puissent servir de base à de futures applications IA

Gouvernance et conformité

• Contribuer à garantir la traçabilité des données, des décisions, du code et des tests, conformément aux exigences en matière de contrôle interne et d'audit
• Contribuer au respect des règles de sécurité de l'information, du RGPD et de la gestion des accès, de la source au rapport (droits minimaux, sécurité au niveau des lignes)

5. Qualifications et aptitudes requises:

Formation et expérience

• Diplôme de master ou de bachelor dans une orientation ICT ou similaire par expérience
• Au moins 5ans d'expérience pertinente dans le domaine de la data engineering, du stockage de données ou de la BI, dont au moins 2ans au sein d'une équipe de développement travaillant avec CI/CD