Stage Fin d'Études — LLM et Évaluation IA

SmartRecruiters, Inc.; Puteaux; On-site; EUR 13,000 - 20,000; Full time

Benefits offered by this job

DataCamp access

Mentorat carrière

Copilot M365 access

Job summary

Wavestone recherche un stagiaire de fin d’études pour lancer un projet sur LLM-as-a-Judge: évaluation automatique, fiabilité et qualité des modèles d’IA. Vous rejoindrez une communauté de consultants IA et Data, et contribuerez à des solutions innovantes en production.

Sous supervision d’un consultant et d’un manager, vous développerez des protocoles, des jeux de test et des mesures pour une approche réutilisable et déployable au sein de nos projets d’IA générative.

Qualifications

• Maîtrise de Python et pratique des frameworks LL M: appels d’API, prompt engineering, architectures RAG.
• Connaissances en IA et transformation digitale adaptées au conseil.
• Capacité à raisonner méthodologiquement et à mesurer des résultats.
• Intérêt pour le conseil et les environnements client grands comptes.
• Français courant requis.
• Anglais niveau C1 requis.

Responsibilities

• Concevoir des protocoles d’évaluation automatisés de solutions GenAI et agentiques
• Construire des jeux de test et des grilles de notation adaptés aux cas d’usage
• Mesurer la fiabilité des évaluations et analyser les biais des modèles juges
• Intégrer l’évaluation dans les chaînes de déploiement et les dispositifs de monitoring
• Formaliser un cadre d’évaluation réutilisable et le diffuser au sein de la communauté

Skills

Python

LLM prompts

API calls

Data science

Anglais C1

Education

Diplôme d’Ingénieur / PGE

Job description

Wavestone recherche un stagiaire de fin d’études pour lancer un projet sur LLM-as-a-Judge: évaluation automatique, fiabilité et qualité des modèles d’IA. Vous rejoindrez une communauté de consultants IA et Data, et contribuerez à des solutions innovantes en production.

Sous supervision d’un consultant et d’un manager, vous développerez des protocoles, des jeux de test et des mesures pour une approche réutilisable et déployable au sein de nos projets d’IA générative.