Data Engineer H/F

AFNOR Group; Saint-Denis; Hybride; EUR 55 000 - 70 000; Plein temps

Avantages offerts par ce poste

Télétravail

Mutuelle santé & famille

Horaires aménageables

Formation et mobilité interne

Résumé du poste

AFNOR Group recherche un Data Engineer basé à La Plaine Saint-Denis pour concevoir et industrialiser les chaînes de traitement alimentant des services IA, en collaboration avec les data scientists. Vous travaillerez sur l’ingestion des collections, la traçabilité des données et l’orchestration des traitements en production.

Le poste exige une maîtrise de Python et SQL, et une expérience avec des orchestrateurs (Airflow/Dagster/Prefect).

Qualifications

• Minimum 3 ans d'expérience en data engineering et conception d'architecture de données.
• Maîtrise de Python et SQL; connaissance d'un orchestrateur (Airflow, Dagster, Prefect).
• Modélisation de données relationnelles et consommation d'API.
• Anglais professionnel requis pour partenaires internationaux.

Responsabilités

• Concevoir, développer et industrialiser l’ingestion des collections et de leurs métadonnées.
• Développer les chaînes de traitement en Python et SQL et orchestrer les traitements IA en production.
• Garantir qualité, traçabilité et versionnement des données; gérer la robustesse et l observabilité des chaines de traitement.

Connaissances

Python

SQL

Orchestrateur

Modélisation de données

API

Anglais professionnel

Formation

Formation supérieure en informatique ou data

Outils

Airflow

Dagster

Prefect

OpenTelemetry

Elasticsearch

Description du poste

Le contexte

Nos données, principalement constituées de documents normatifs PDF et XML et de leurs métadonnées, alimentent plusieurs services numériques et d’intelligence artificielle du Groupe.

Qui sommes-nous ?…

Le contexte

Nos données, principalement constituées de documents normatifs PDF et XML et de leurs métadonnées, alimentent plusieurs services numériques et d’intelligence artificielle du Groupe. Nos data scientists développent des services d’enrichissement, d’analyse et de recherche s’appuyant notamment sur la recherche sémantique et les architectures RAG. Ces services sont intégrés à des produits commercialisés et exploités en production. Vos choix techniques ont donc un impact direct sur leur fiabilité, leurs performances, leur capacité à monter en charge et leur coût d’exploitation. Vous évoluez dans un environnement hybride, entre infrastructures on‑premise et cloud. Le poste combine conception d’architecture et mise en œuvre concrète : vous concevez, développez et industrialisez en Python et SQL les chaînes de traitement qui alimentent ces services. L’équipe s’agrandit autour de nouveaux enjeux : intégration de collections internationales, évolution des modèles de données, montée en charge des services IA et industrialisation des chaînes de traitement.

Vos missions

Ingestion et alimentation des collections

• Concevoir, développer et industrialiser l’ingestion des collections normatives (PDF, XML)

et de leurs métadonnées, y compris celles de partenaires internationaux.

• Automatiser le suivi des évolutions des référentiels sources et réduire le délai d’intégration de nouvelles collections

• Garantir la qualité, la traçabilité et le versionnement des données

Développement et orchestration des chaînes de traitement

• Concevoir, développer et industrialiser en Python et SQL les chaînes qui alimentent nos services d’intelligence artificielle en production

• Orchestrer les traitements : extraction, parsing, transformation, appels aux API d’enrichissement développées par les data scientists, puis chargement et indexation

• Garantir la robustesse des chaînes : reprise sur erreur, rejeu, idempotence et gestion des dépendances

• Instrumenter les traitements et automatiser les contrôles de qualité des données

Architecture et industrialisation IA

• Concevoir et faire évoluer l’architecture des chaînes data alimentant nos produits et services IA, en arbitrant entre performance, robustesse, évolutivité et maîtrise des coûts

• Modéliser les bases de données et définir les contrats d’interface entre composants : schémas, API et formats d’échange

• Définir avec les data scientists les contrats d’intégration de leurs services d’enrichissement et les critères de mise en production

• Participer à l’industrialisation des usages IA : recherche sémantique, bases vectorielles et architectures RAG

• Documenter les choix structurants sous forme d’Architecture Decision Records (ADR)

Référent data du pôle

• Porter les sujets data auprès des architectes DSI, de la Sécurité et des Ops
• Assurer la coordination technique avec les partenaires internationaux pour l’intégration de leurs collections

• Analyser l’impact des évolutions de données, d’API et de services sur les applications consommatrices

Ce que le poste n'est pas

Il ne s’agit pas d’un poste d’architecte uniquement : vous restez directement impliqué dans la conception, le développement, les tests et l’industrialisation des chaînes de traitement. Vous ne développez pas les modèles ni les algorithmes d'enrichissement : c'est le rôle des data scientists, avec qui vous définissez les contrats d’intégration. Vous n'assurez pas le monitoring d'exploitation ni l'analyse des logs, qui sont pris en charge par une personne dédiée. Vous travaillez avec elle pour que les chaînes soient observables. Vous n'êtes pas responsable de l'urbanisation SI globale du Groupe ni du pilotage des livraisons produit.

Évolution du poste

Ce poste offre une trajectoire naturelle vers un rôle d’Architecte Data, avec une montée progressive en responsabilité sur les choix d’architecture, les standards techniques et la vision cible du domaine data.

Profil

De formation supérieure en informatique ou en data, vous disposez de minimum 3 ans d'expérience en tant que data engineering, dont une expérience de conception d'architecture de données.

• Maîtrise de Python et SQL, et d'au moins un orchestrateur (Airflow, Dagster, Prefect ou équivalent)

• Modélisation de données relationnelles, conception et consommation d'API

• Capacité à formaliser et défendre des choix techniques auprès d'interlocuteurs variés, techniques ou non

• Anglais professionnel requis (partenaires internationaux)

Atouts appréciés :

• Expérience d'une plateforme alimentant des produits IA (RAG, bases vectorielles), pratique de l'instrumentation OpenTelemetry ou de l'intégration avec Elastic, notions de data quality et de lignage

Pourquoi nous rejoindre

• Un environnement stimulant : une mission d'intérêt générale , un collectif engagé, une expertise reconnue, une forte influence sur les politiques publiques et industrielles.

• Un équilibre vie pro / vie perso : télétravail, horaires aménageables, mutuelle famille, dispositifs aidants, etc.

• Des opportunités de développement : parcours de formation, mobilité interne, accompagnement individualisé.

• Un employeur responsable : politique RSE ambitieuse, inclusion, égalité, accessibilité.

• Une vie d’équipe dynamique : événements, activités culturelles et sportives via un CSE impliqué.

Informations complémentaires

• Poste basé à La Plaine Saint-Denis (RER B, ligne 14)

• Rémunération proposée entre 55 et 70 000€ brut annuel en fonction du profil

L’association AFNOR, chargée d’une mission d’intérêt général, constitue avec ses filiales un groupe international au service du développement durable. Le groupe de 1318 collaborateurs, 37 implantations dans le monde et 70 000 clients, conçoit des solutions fondées sur les normes volontaires, sources de progrès et de confiance depuis 1926. Sa vocation est d’accompagner les organisations et les personnes pour diffuser cette confiance. Un accompagnement qui s’effectue au travers de 4 domaines de compétences.