Consultant QA IA Senior – Recette & Tests API

Devoteam; Pays de la Loire; Sur place; EUR 65 000 - 90 000; Plein temps

Résumé du poste

Devoteam Nantes recherche un.e Consultant.e QA IA Senior pour prendre en autonomie la recette d’un projet IA. Vous définissez la stratégie de tests, rédigez des scénarios et réalisez les tests des IHM, API et agents IA, en lien avec les PO, développeurs et métiers.

Vous devrez tester la pertinence des réponses IA, gérer les données de test et piloter les anomalies, tout en évoluant dans un cadre Agile et collaboratif au sein de Devoteam Creative Tech.

Qualifications

• Solide expérience en QA / recette fonctionnelle et technique.
• Expérience significative sur les tests API.
• Maîtrise de JIRA et Xray.
• Capacité à construire une stratégie de tests de bout en bout.
• À l’aise dans un environnement Agile avec de nombreux interlocuteurs.
• Capacité à challenger les équipes et structurer la recette.
• Une expérience concrète de recette/évaluation de solutions GenAI, LLM ou agents IA est obligatoire.

Responsabilités

• Définir la stratégie de tests globale du projet.
• Construire la stratégie d’évaluation et de recette des agents IA.
• Rédiger les scénarios et cas de tests.
• Réaliser les tests des IHM, API et agents IA.
• Tester la pertinence et la robustesse des réponses IA (cohérence, hallucinations, reproductibilité, performance).
• Créer ou compléter les jeux de données de test.
• Identifier, documenter et suivre les anomalies.
• Piloter et coordonner la recette métier.
• Travailler quotidiennement avec les équipes PO, DEV, IA, Data et métiers.

Connaissances

QA/Recette

Tests API

JIRA/Xray

Stratégie tests

Méthode Agile

Pilotage recette

Outils

JIRA

Xray

Bruno

Description du poste

Devoteam Nantes recherche un.e Consultant.e QA IA Senior pour prendre en autonomie la recette d’un projet IA. Vous définissez la stratégie de tests, rédigez des scénarios et réalisez les tests des IHM, API et agents IA, en lien avec les PO, développeurs et métiers.

Vous devrez tester la pertinence des réponses IA, gérer les données de test et piloter les anomalies, tout en évoluant dans un cadre Agile et collaboratif au sein de Devoteam Creative Tech.