Ingénieur IA - Agents de test & Qualité - Freelance (H/F)

Brief IA

Paris

On-site

EUR 77,000 - 89,000

Full time

3 days ago
Be an early applicant

A complete application in a minute

Tailored resume and cover letter, ready to send.

Get past ATS filters

Job summary

Brief IA recherche un expert QA pour concevoir et piloter la stratégie de test des agents IA utilisés dans nos projets d'audit et de conseil. Vous définirez les types de tests, les scénarios et les critères d'acceptation.

Vous couvrirez les domaines applicatif, data et data science, validerez les modèles et les prompts des LLM, et assurerez une intégration CI/CD sur Azure DevOps et GitHub.

Responsibilities

  • Définir la stratégie de test globale : identifier les types de tests pertinents selon le domaine (applicatif, data, data science, IA générative) et le niveau de risque, avant toute mise en production
  • Concevoir, développer et faire évoluer des agents IA capables de prendre en charge le cycle QA de bout en bout : analyse des besoins et génération des cas de test et scénarios, écriture et maintenance des scripts de tests automatisés, exécution, analyse des résultats et remontée des anomalies
  • Couvrir l'ensemble des domaines : Applications : tests fonctionnels, end-to-end, API, non-régression, performance, sécurité; Data : qualité et cohérence des données, contrôle des pipelines, réconciliation; Data science / IA : validation des modèles, évaluation des LLM, RAG et agents (pertinence, fidélité, hallucinations), non-régression des prompts et des modèles; Sécuriser le passage du POC au produit : critères d'acceptation, robustesse, sécurité (injection de prompt, fuite de données), performance et maîtrise des coûts; Intégrer les agents et les tests dans les chaînes CI/CD (Azure Dev Ops / Git Hub)
  • Accompagner les équipes produit d

Job description

Taux journalier (TJM): 450

Le contexte

Notre client, un grand cabinet d'audit et de conseil, développe et opère en interne une quinzaine de produits applicatifs (C# . NET / Vue.js) sur Microsoft Azure, au service de ses métiers Audit, Advisory et de ses fonctions support.

Il construit aujourd'hui rapidement des POC/POV avec l'IA générative (« vibe coding »), qui s'appuient sur des services d'IA cloud (LLM, RAG, agents). Pour que ces prototypes deviennent des produits fiables, sécurisés et exploitables en production, le client a une ambition forte : confier l'ensemble du contrôle qualité à des agents IA, sur tous les domaines (applications, data, data science).

Vous serez la personne qui conçoit et construit ces agents, et qui définit la stratégie de test qu'ils mettront en œuvre.

Vos missions
  • Définir la stratégie de test globale : identifier les types de tests pertinents selon le domaine (applicatif, data, data science, IA générative) et le niveau de risque, avant toute mise en production
  • Concevoir, développer et faire évoluer des agents IA capables de prendre en charge le cycle QA de bout en bout :
    • analyse des besoins et génération des cas de test et scénarios
    • écriture et maintenance des scripts de tests automatisés
    • exécution, analyse des résultats et remontée des anomalies
  • Couvrir l'ensemble des domaines :
    • Applications : tests fonctionnels, end-to-end, API, non-régression, performance, sécurité
    • Data : qualité et cohérence des données, contrôle des pipelines, réconciliation
    • Data science / IA : validation des modèles, évaluation des LLM, RAG et agents (pertinence, fidélité, hallucinations), non-régression des prompts et des modèles
    • Sécuriser le passage du POC au produit : critères d'acceptation, robustesse, sécurité (injection de prompt, fuite de données), performance et maîtrise des coûts
    • Intégrer les agents et les tests dans les chaînes CI/CD (Azure Dev Ops / Git Hub)
  • Accompagner les équipes produit d
Get your free, confidential resume review.

or drag and drop your file here.

Similar jobs

Similar jobs worth comparing

QC IA – Qualité & Agents de test IA (IT) / Freelance
QC IA – Qualité & Agents de test IA (IT) / Freelance

5COM CONSULTING • Courbevoie

On-site
EUR 60,000 - 90,000
QA IA
QA IA

Raedy • Courbevoie

On-site
EUR 60,000 - 90,000
Ingénieur qualité & agents de test IA senior / expert
Ingénieur qualité & agents de test IA senior / expert

SARIEL • Courbevoie

On-site
EUR 70,000 - 100,000
Ingénieur IA — Agents QA & Tests End-to-End
Ingénieur IA — Agents QA & Tests End-to-End

Brief IA • Paris

On-site
EUR 77,000 - 89,000
Ingénieur QA IA et Agents de Test Génératifs
Ingénieur QA IA et Agents de Test Génératifs

5COM CONSULTING • Courbevoie

On-site
EUR 60,000 - 90,000
Consultant Expert Test IA / QA Senior – Architectures Agentiques (IT) / Freelance
Consultant Expert Test IA / QA Senior – Architectures Agentiques (IT) / Freelance

VISIAN • Paris

On-site
EUR 70,000 - 110,000
TEST – Consultant Expert Test IA – Senior (IT) / Freelance
TEST – Consultant Expert Test IA – Senior (IT) / Freelance

VISIAN • Paris

On-site
EUR 90,000 - 130,000
QA Architect - Agentic Test Orchestration(H/F)
QA Architect - Agentic Test Orchestration(H/F)

Dhm IT • Neuilly-sur-Seine

Hybrid
EUR 55,000 - 75,000
Rémunération attractive
Carte resto
Mutuelle et prévoyance
+2
testeur automaticien avec compétences en ia (h/f).
testeur automaticien avec compétences en ia (h/f).

RANDSTAD Digital • Nanterre

On-site
EUR 60,000 - 90,000
QA Engineer - F/H
QA Engineer - F/H

ChapsVision • Paris

Hybrid
EUR 45,000 - 65,000
Carte SWILE prise en charge à 60%
Transport pris en charge à 50%
Forfait mobilité durable jusqu’à 400€ / an
+2