Data Engineer H/F

AFNOR Group; Saint-Denis; Hybrid; EUR 55,000 - 70,000; Full time

Benefits offered by this job

Télétravail

Mutuelle famille

Dispositifs aidants

Formation et mobilité interne

Événements CSE

Job summary

AFNOR Group recherche un Data Engineer H/F en CDI à Saint-Denis pour concevoir, développer et industrialiser les chaînes de traitement des données normatives. Vous travaillerez en Python et SQL, orchestrerez les flux avec des outils comme Airflow ou Dagster et collaborerez avec les data scientists et partenaires internationaux.

Le poste implique une prise d’ownership sur l’ingestion, l’architecture et l’intégration de services d’IA, tout en garantissant traçabilité, qualité et coûts maîtrisés

Qualifications

• Diplôme supérieur en informatique ou data.
• Minimum 3 ans d'expérience en data engineering.
• Maîtrise de Python et SQL.
• Connaissance d'au moins un orchestrateur (Airflow, Dagster, Prefect).
• Anglais professionnel requis.

Responsibilities

• Concevoir et industrialiser l’ingestion des collections normatives (PDF/XML) et leurs métadonnées.
• Orchestrer les traitements en Python/SQL et intégrer les API d’enrichissement.
• Garantir robustesse, reprise sur erreur, idempotence et traçabilité des données.
• Définir l’architecture data et les contrats d’interface entre composants (schémas/API).
• Collaborer avec les data scientists et partenaires internationaux; documenter en ADR.
• Analyser l’impact des évolutions de données, API et services sur les applications consommateurs.

Skills

Python

SQL

Airflow/Dagster/Prefect

API design

Anglais professionnel

Education

Formation supérieure en informatique ou data

Tools

Airflow

Dagster

Prefect

Elastic

OpenTelemetry

Job description

# Data Engineer H/FDataCDI9 joursSaint-Denis (93210)## Description du posteQui sommes-nous ?...**Le contexte**Nos données, principalement constituées de documents normatifs PDF et XML et de leurs métadonnées, alimentent plusieurs services numériques et d’intelligence artificielle du Groupe.Nos data scientists développent des services d’enrichissement, d’analyse et de recherche s’appuyant notamment sur la recherche sémantique et les architectures RAG. Ces services sont intégrés à des produits commercialisés et exploités en production.Vos choix techniques ont donc un impact direct sur leur fiabilité, leurs performances, leur capacité à monter en charge et leur coût d’exploitation. Vous évoluez dans un environnement hybride, entre infrastructures on-premise et cloud.Le poste combine conception d’architecture et mise en œuvre concrète : vous concevez, développez et industrialisez en Python et SQL les chaînes de traitement qui alimentent ces services.L’équipe s’agrandit autour de nouveaux enjeux : intégration de collections internationales, évolution des modèles de données, montée en charge des services IA et industrialisation des chaînes de traitement.**Vos missions****Ingestion et alimentation des collections**• Concevoir, développer et industrialiser l’ingestion des collections normatives (PDF, XML)et de leurs métadonnées, y compris celles de partenaires internationaux.• Automatiser le suivi des évolutions des référentiels sources et réduire le délaid’intégration de nouvelles collections.• Garantir la qualité, la traçabilité et le versionnement des données.Développement et orchestration des chaînes de traitement• Concevoir, développer et industrialiser en Python et SQL les chaînes qui alimentent nosservices d’intelligence artificielle en production.• Orchestrer les traitements : extraction, parsing, transformation, appels aux APId’enrichissement développées par les data scientists, puis chargement et indexation.• Garantir la robustesse des chaînes : reprise sur erreur, rejeu, idempotence et gestiondes dépendances.• Instrumenter les traitements et automatiser les contrôles de qualité des données.Architecture et industrialisation IA• Concevoir et faire évoluer l’architecture des chaînes data alimentant nos produits etservices IA, en arbitrant entre performance, robustesse, évolutivité et maîtrise descoûts.• Modéliser les bases de données et définir les contrats d’interface entre composants :schémas, API et formats d’échange.• Définir avec les data scientists les contrats d’intégration de leurs servicesd’enrichissement et les critères de mise en production.• Participer à l’industrialisation des usages IA : recherche sémantique, bases vectorielleset architectures RAG.• Documenter les choix structurants sous forme d’Architecture Decision Records (ADR).Référent data du pôle• Porter les sujets data auprès des architectes DSI, de la Sécurité et des Ops.• Assurer la coordination technique avec les partenaires internationaux pour l’intégrationde leurs collections.• Analyser l’impact des évolutions de données, d’API et de services sur les applicationsconsommatrices.**Ce que le poste n'est pas**Il ne s’agit pas d’un poste d’architecte uniquement : vous restez directement impliqué dans la conception, le développement, les tests et l’industrialisation des chaînes de traitement.Vous ne développez pas les modèles ni les algorithmes d'enrichissement : c'est le rôle des data scientists, avec qui vous définissez les contrats d'intégration.Vous n'assurez pas le monitoring d'exploitation ni l'analyse des logs, qui sont pris en charge par une personne dédiée. Vous travaillez avec elle pour que les chaînes soient observables.Vous n'êtes pas responsable de l'urbanisation SI globale du Groupe ni du pilotage des livraisons produit.**Évolution du poste**Ce poste offre une trajectoire naturelle vers un rôle d’Architecte Data, avec une montée progressive en responsabilité sur les choix d’architecture, les standards techniques et la vision cible du domaine data.**Profil :**De formation supérieure en informatique ou en data, vous disposez de minimum 3 ans d'expérience en tant que data engineering, dont une expérience de conception d'architecture de données.• Maîtrise de Python et SQL, et d'au moins un orchestrateur (Airflow, Dagster, Prefect ouéquivalent).• Modélisation de données relationnelles, conception et consommation d'API.• Capacité à formaliser et défendre des choix techniques auprès d'interlocuteurs variés,techniques ou non.• Anglais professionnel requis (partenaires internationaux).**Atouts appréciés :** Expérience d'une plateforme alimentant des produits IA (RAG, bases vectorielles), pratique de l'instrumentation OpenTelemetry ou de l'intégration avec Elastic, notions de data quality et de lignage**Pourquoi nous rejoindre*** Un environnement stimulant : une mission d'intérêt générale , un collectif engagé, une expertise reconnue, une forte influence sur les politiques publiques et industrielles.* Un équilibre vie pro / vie perso : télétravail, horaires aménageables, mutuelle famille, dispositifs aidants, etc.* Des opportunités de développement : parcours de formation, mobilité interne, accompagnement individualisé.* Un employeur responsable : politique RSE ambitieuse, inclusion, égalité, accessibilité.* Une vie d’équipe dynamique : événements, activités culturelles et sportives via un CSE impliqué.**Informations complémentaires*** Poste basé à La Plaine Saint-Denis (RER B, ligne 14)* Rémunération proposée entre 55 et 70 000€ brut annuel en fonction du profil