Data Engineer - Pipelines & IA Architecture

AFNOR Groupe; Saint-Denis; Hybride; EUR 55 000 - 70 000; Plein temps

Avantages offerts par ce poste

Télétravail

Mutuelle familiale

Mobilité interne

Parcours de formation

Résumé du poste

AFNOR Groupe recherche un ingénieur data pour concevoir et industrialiser les chaînes de traitement alimentant les services IA. Vous travaillez en Python et SQL et coordonnez l ingestion de collections normatives et leurs métadonnées.

Vous définissez l architecture des flux, garantissez leur robustesse et contrôlez la qualité des données, tout en collaborant avec les data scientists et partenaires internationaux.

Qualifications

• Maîtrise de Python et SQL, et d'au moins un orchestrateur (Airflow, Dagster, Prefect).
• Modélisation de données relationnelles, conception et consommation d'API.
• Capacité à formaliser et défendre des choix techniques auprès d interlocuteurs variés, techniques ou non.
• Anglais professionnel requis (partenaires internationaux).

Responsabilités

• Ingestion et ingestion des collections normatives et métadonnées, y compris partenariats internationaux.
• Conception, développement et industrialisation en Python et SQL des chaînes de traitement en production.
• Orchestration: extraction, parsing, transformation, appels API d enrichissement, chargement et indexation.
• Robustesse des chaînes: reprise sur erreur, rejeu, idempotence et gestion des dépendances.
• Instrumentation des traitements et contrôles qualité des données.
• Architecture et industrialisation IA: définir l architecture, contrats d interface et ADR.
• Référent data: coordination avec architectes DSI et partenaires internationaux.

Connaissances

Python

SQL

Airflow

Dagster

Prefect

Formation

Formation supérieure en informatique ou data

Outils

Python

SQL

Airflow

Dagster

Prefect

Description du poste

AFNOR Groupe recherche un ingénieur data pour concevoir et industrialiser les chaînes de traitement alimentant les services IA. Vous travaillez en Python et SQL et coordonnez l ingestion de collections normatives et leurs métadonnées.

Vous définissez l architecture des flux, garantissez leur robustesse et contrôlez la qualité des données, tout en collaborant avec les data scientists et partenaires internationaux.