Stage Inégnieur.e évaluation des systèmes d'IA F/H

Kereval; Torcé; On-site; EUR 11,000 - 17,000; Full time

Job summary

Kereval recherche un-e stagiaire pour intégrer l’équipe IA et contribuer à des travaux de R&D sur les tests des systèmes d’IA. Vous serez amené.e à établir l'état de l'art sur l’IA agentique, développer des agents avec différents frameworks, et construire des métriques d’évaluation.

Selon tes compétences, tu interviendras sur des projets variés incluant des modèles de langage, le machine learning et la vision par ordinateur, avec une collaboration étroite avec l’équipe cybersécurité.

Qualifications

• Connaissances en IA agentique et architectures d'agents.
• Capacité à prototyper des agents avec différents frameworks.
• Compétences en évaluation de systèmes IA et métriques.
• Bon esprit collaboratif avec l'équipe cybersécurité.

Responsibilities

• Établir un état de l'art sur l'IA agentique.
• Développer des agents et prototyper avec plusieurs frameworks.
• Construire des méthodes et outils d'évaluation.
• Présenter les résultats en interne et en externe.
• Travailler sur des projets utilisant LLM, ML, vision par ordinateur.

Skills

IA

R&D

Cybersécurité

Prototypage

Job description

Tu intègreras l’équipe IA, participeras activement aux travaux de R&D autour de test des systèmes d’IA !

Dans ce cadre, tu seras amené.e à :

• Établir un état de l'art sur l'IA agentique : panorama des architectures, des frameworks du marché ...
• Développer des agents : prototyper plusieurs agents de complexité croissante avec différents frameworks, appliqués à des cas d'usage cybersécurité et autres. Vous travaillerez en collaboration avec notre équipe cyber pour le développement et l’analyse
• Construire des méthodes et outils d'évaluation : définir des métriques (performance sur la tâche, fiabilité des appels d'outils, qualité du raisonnement, robustesse, coût, latence), constituer des jeux de tests et s'appuyer sur les benchmarks existants ...
• Formaliser les méthodes sélectionnées d'évaluation sélectionnées
• Présenter vos résultats en interne et en externe

Selon tes compétences et ta progression, tu pourras intervenir sur des projets utilisant des technologies variées : modèles de langage (LLM), machine learning, computer vision, agent, RAG, MCP, etc.