Senior AI Engineer – Paris: LLM Apps & Quality

Welcome to the Jungle; Paris; On-site; EUR 60,000 - 70,000; Full time

Job summary

Artefact recherche un AI Engineer pour rejoindre son chapitre AI Applied Engineer à Paris. Vous concevrez et déployerez des applications et des agents basés sur des LLM, en gérant le contexte, l’accès aux outils, et les workflows multi-étapes.

En collaboration avec le CTO et les experts métier, vous définirez les objectifs de performance et assurerez la qualité des réponses en production via des jeux de tests et des métriques, tout en maîtrisant les coûts et la latence.

Qualifications

• Expérience avec des applications LLM et des agents.
• Code testé et maintenable.
• Gestion des sorties IA et limitation des hallucinations et fuites de données.
• Mise en production et maintenance d’une application LLM.
• Capacité à expliquer les choix techniques à des non-techniciens.

Responsibilities

• Construire des applications et des agents LLM : conception du contexte, appel d’outils, workflows multi-étapes.
• Concevoir la façon dont les agents exploitent les connaissances : requêtes de retrieval, re-ranking, citations.
• Construire des jeux et des pipelines d’évaluation : réponses de référence, scoring automatisé, relecture par des experts métier.
• Suivre la qualité des réponses en production et corriger ce qui se dégrade.
• Choisir les modèles selon la qualité, le coût et la latence ; faire du fine-tuning ou de la distillation sur un modèle plus petit.
• Ajouter des garde-fous contre les mauvaises réponses, les fuites de données et le prompt injection.
• Traiter des documents avec des LLM : extraction, classification, résumés.

Skills

Applications LLM

Qualité du code

Agents de codage

Évaluations IA

Education

Formation ML ou statistiques

Tools

Observabilité LLM

Retrieval pipelines

Fine-tuning / Distillation

Job description

Artefact recherche un AI Engineer pour rejoindre son chapitre AI Applied Engineer à Paris. Vous concevrez et déployerez des applications et des agents basés sur des LLM, en gérant le contexte, l’accès aux outils, et les workflows multi-étapes.

En collaboration avec le CTO et les experts métier, vous définirez les objectifs de performance et assurerez la qualité des réponses en production via des jeux de tests et des métriques, tout en maîtrisant les coûts et la latence.