Développeur IA F/H - Contenus & LLMOps

CAPFI; Paris; Vor Ort; EUR 50.000 - 70.000; Vollzeit

Benefits dieser Stelle

Formations certifiantes

Flexibilité de travail

Engagement sociétal

Zusammenfassung

Une entreprise de services numériques basée à Paris recherche un expert en LLMOps pour gérer l'opérabilité d'un Hub IA. Le candidat sera responsable de la mise en place d'un système de gestion des prompts et du contrôle des coûts, en déployant un monitoring complet pour garantir la qualité. Une expérience avec Symfony, PostgreSQL et Docker est essentielle. Ce poste promet un environnement de travail flexible et dynamique, axé sur l'innovation et le développement humain.

Qualifikationen

• Évaluation continue, monitoring et gestion des déploiements.
• Capacité à intégrer l’IA dans un CI/CD.
• Mise en place de Quality Gates IA.
• Gestion des prompts : versioning, templates, rollback et A/B testing.
• Déploiement d'un monitoring complet.

Aufgaben

• Mettre en place un système industrialisé pour la gestion des prompts.
• Établir des mécanismes de contrôle des coûts.
• Déployer un monitoring complet pour assurer la qualité.
• Définir et mettre en œuvre des quality gates spécifiques à l'IA.

Kenntnisse

Compétences LLMOps

Gestion des prompts

Qualité mesurable

Optimisation des coûts

Monitoring

Tools

Symfony 7

PostgreSQL

Docker

Angular

Jobbeschreibung

Overview

CAPFI est une ESN 2.0 basée à Paris (8ème) rassemblant moins de 200 passionnés intervenant pour 70 clients grands comptes (CAC 40, SBF 250) dans les secteurs : Industrie, Médias, Cosmétique, Énergie; Banque & Assurance; Banque d'investissement & Asset Management. Nos expertises couvrent l'infrastructure IT & la cybersécurité, les projets digitaux et data/IA, la gestion de projet & maîtrise d'ouvrage. CAPFI repose sur deux piliers : le développement humain et l'expertise, où l'innovation passe par la passion et la rigueur technique. Nous sommes reconnus pour notre capacité à répondre à des projets critiques, complexes et à forte valeur ajoutée.

Un de nos clients, dont l'activité principale réside dans la défense d'intérêts, met en œuvre un Système d’Information unifié, incluant un socle CRM/ERP, un CMS léger et un Hub IA. L'ambition est de bâtir une plateforme souveraine, sécurisée et industrialisée, pour soutenir durablement l'exploitation, les corrections et l'évolution continue du produit. Le rôle se concentre sur l’ opérabilité du Hub IA, la maîtrise des coûts et la qualité mesurable, à travers la gestion des prompts, le déploiement, le monitoring et l'exploitation en continu.

• Dispositif de gestion des prompts : Mettre en place et documenter un système industrialisé pour la gestion des prompts (versioning, rollback, templates).
• Maîtrise des coûts : Établir des mécanismes de contrôle des coûts (caching, routing, quotas) pilotés par des indicateurs clairs.
• Monitoring et exploitation : Déployer un monitoring complet (qualité, latence, erreurs, coûts, dérive) et fournir les runbooks opérationnels associés.
• Quality Gates IA : Définir et mettre en œuvre des quality gates spécifiques à l'IA, incluant des golden sets, des tests automatiques, des seuils d’acceptation et un suivi dans le temps.

Compétences techniques et Expérience :

• Compétences LLMOps :
  • Évaluation continue, monitoring et gestion des déploiements.
  • Capacité à intégrer l’IA dans un CI/CD.
  • Mise en place de Quality Gates IA (golden sets, tests automatiques, seuils d’acceptation).
  • Gestion des prompts : versioning, templates, rollback et A/B testing.
  • Optimisation des coûts : caching, routing de modèles, quotas et mesures de consommation par profil.
  • Monitoring : latence, erreurs, coûts, dérive ; avec des runbooks d’exploitation.
• Qualité mesurable et réduction des sorties non fiables.
• Application des règles de citation.

Compétences LLMOps et Culture Produit :

• Compétences LLMOps (suite ci-dessus) et Culture Produit : qualité mesurable et réduction des sorties non fiables ; application des règles de citation.

Socle technique cible

• Stack Backend : Symfony 7, API Platform, PostgreSQL, Doctrine, Messenger.
• Front-end : Angular (prioritaire).
• DevOps/Infra : CI/CD et Docker constituent le socle commun.

Exigences transverses (Qualité et Sécurité)

• Qualité :
  • Contribution active à la qualité du produit et respect de la Definition of Done commune (non-régression, quality gates, documentation utile).
  • Pratiques d’équipe : PR de taille maîtrisée, revues systématiques, conventions partagées, et usage de feature flags.
• Sécurité :
  • Sécurité applicative pragmatique.
  • Gestion rigoureuse des secrets.
  • Validations côté serveur et côté client.
  • Journaux et traces d’audit.
  • Chiffrement si nécessaire.

Expérience générale

• Capacité à produire, expliciter les choix, documenter et transmettre dans un contexte multi-acteurs et multi-fournisseurs.
• Sécurité : journaux/audit, politiques, gestion des données sensibles.
• Pérennisation : capacité à intégrer le runbooks, le transfert de compétences et la réversibilité dès la phase build.

CAPFI est une entreprise vivante qui place le collectif et le partage entre pairs au cœur de sa culture. Nous vous proposons un environnement de travail flexible dans l’organisation et agile dans le choix de vos missions. CAPFI c’est aussi :

• Vous offrir la possibilité de suivre des formations certifiantes ;
• Vous permettre de rejoindre les Tribus et de faire vivre l’énergie collective et l\'expertise de CAPFI ;
• Vous permettre de consacrer un peu de votre temps pour aider les autres, via NQT, Emmaüs Connect et Le Congé Solidaire, des initiatives dont CAPFI est partenaire.

Chez CAPFI, nous mettons aussi un point d’honneur à ce que tous nos talents évoluent dans un environnement de travail sain, serein et respectueux des exigences sociétales et environnementales. C’est pourquoi :

• Nous sommes labellisés B Corp ;
• Nous sommes signataires de la charte sur l’équilibre vie professionnelle – vie personnelle et de la charte éthique CAPFI.

Notre processus de recrutement :

• Nous apprenons à nous connaître lors d’un premier entretien téléphonique puis une visio
• Si vous avez le feeling et que nous aussi, vous réalisez un test technique via la plateforme CodinGame
• Débrief des résultats de votre test avec un consultant CAPFI
• Kick off : nous vous proposons une offre de collaboration et nous en discutons ensemble
• Vous embarquez pour une session d’onboarding : bienvenue dans la famille CAPFI !