GenAI QA Engineer: AI Model Testing & Reliability

Skapa Agency; Paris; Sur place; EUR 50 000 - 70 000; Plein temps

Résumé du poste

Une agence de transformation des organisations recherche un QA IA responsable de la qualité et de la conformité des systèmes IA. Ce poste nécessite des compétences avancées en ML et en automatisation de tests, ainsi qu'une compréhension des enjeux éthiques. Le candidat idéal a un Bac +5 et 2 à 5 ans d'expérience en QA, Data ou ML, et saura élaborer des méthodologies de tests innovantes. La mission inclut la détection des biais et l'amélioration continue des systèmes.

Qualifications

• 2 à 5 ans en QA, Data, ML ou automatisation de tests.
• Compréhension forte du ML et de la GenAI.
• Expérience dans le test de modèles ou systèmes complexes.

Responsabilités

• Définir la méthodologie QA adaptée au type de modèle.
• Construire les plans de test IA.
• Tester la performance (metrics ML), la robustesse, l’explicabilité.

Connaissances

Compréhension avancée : ML, LLM, RAG, pipelines, monitoring

Bon niveau en statistiques, métriques IA

Automatisation des tests

Notions de SRE / performance testing

Méthodologie CT‑AI (tests confiance IA)

Communication claire avec Data Scientists & PO

Sensibilité éthique et RGPD

Formation

Bac +5 (data / informatique / stats)

Outils

FastAPI

Flask

DeepEval

Ragas

Promptfoo

Description du poste

Une agence de transformation des organisations recherche un QA IA responsable de la qualité et de la conformité des systèmes IA. Ce poste nécessite des compétences avancées en ML et en automatisation de tests, ainsi qu'une compréhension des enjeux éthiques. Le candidat idéal a un Bac +5 et 2 à 5 ans d'expérience en QA, Data ou ML, et saura élaborer des méthodologies de tests innovantes. La mission inclut la détection des biais et l'amélioration continue des systèmes.