STAGE - Évaluation des grands modèles de langage pour les systèmes critiques via l’analyse sémantique des graphes (F/H)

Thales Group

Palaiseau

Sur place

EUR 6 700 - 10 000

Plein temps

Il y a 5 jours
Soyez parmi les premiers à postuler

Obtenez une réponse de cet employeur

Votre CV et votre lettre de motivation, adaptés exactement à ce que l’employeur recherche.

Passez les filtres ATS

Résumé du poste

Thales Group recherche un stagiaire Master 2/3 ans en ingénierie pour travailler sur des LLM et la génération de requêtes, avec une approche sémantique par graphes de connaissance.

Vous contribuerez à définir une méthodologie robuste, à traduire les requêtes en graphes et à évaluer les performances sur des données réelles dans un cadre industriel Thales.

Qualifications

  • Étudiant en Master 2 / 3e année d'école d'ingénieur ou équivalent, stage de fin d'études de 6 mois.
  • Connaissances en NLP, graphes de connaissance et ontologies.
  • Connaissances des LLM et des langages de requête (idéalement cyber).

Responsabilités

  • Mener une enquête de pointe sur les LLM pour la génération de requêtes et l’évaluation des résultats.
  • Définir une méthodologie rigoureuse pour générer, traduire et comparer les requêtes dans le contexte des interactions homme-système.
  • Développer un cadre d’évaluation intégrant les requêtes générées par LLM, des données réelles et des outils de comparaison de graphes sémantiques.
  • Appliquer et valider le cadre d’évaluation sur un cas d’utilisation réel de Thales pour évaluer performance et fiabilité des requêtes générées par LLM.
  • Analyser les résultats et documenter les conclusions.

Connaissances

NLP
Graphes de connaissance
Ontologies
LLM
Langages de requête

Formation

Master 2 en ingénierie / équivalent

Description du poste

Lieu : Palaiseau, France

Construisons ensemble un avenir de confiance

Thales est un leader mondial des hautes technologies spécialisé dans trois secteurs d’activité : Défense & Sécurité, Aéronautique & Spatial, et Cyber & Digital. Il développe des produits et solutions qui contribuent à un monde plus sûr, plus respectueux de l’environnement et plus inclusif. Le Groupe investit près de 4,5 milliards d’euros par an en Recherche & Développement, notamment dans des domaines clés de l’innovation tels que l’IA, la cybersécurité, le quantique, les technologies du cloud et la 6G. Thales compte près de 85 000 collaborateurs dans 65 pays.

Nos engagements, vos avantages
  • Notre savoir-faire technologique
  • Notre attention portée à l’équilibre des collaborateurs
  • Un environnement inclusif et bienveillant
  • Un engagement sociétal et environnemental reconnu (Thales Solidarity, indice CAC 40 ESG…)
Votre quotidien

Thales Research&Technology, notre centre de recherche dans les domaines matériels, et CortAIx Labs, notre centre de recherche en IA et digital ont pour mission de proposer des innovations de ruptures, de maintenir et d’accroitre l’avance technologique et d’en assurer la compétitivité pour le groupe. Les systèmes critiques exigent des interactions homme-système hautement fiables, où la précision et l’interprétabilité sont primordiales. Les progrès récents dans les grands modèles de langage (LLM) offrent des capacités prometteuses pour générer des requêtes complexes à partir d’entrées en langage naturel. Dans ce stage, nous nous concentrerons sur les contextes où les LLM sont utilisés pour générer soit des requêtes sur des bases de données, soit des commandes vers des sous-systèmes. Dans ce contexte, le but de ce stage est d’évaluer l’efficacité et la précision des requêtes générées par LLM utilisées pour les dialogues homme-système dans les systèmes critiques. Les requêtes générées seront traduites en graphes de connaissances sémantiques et comparées aux graphes de vérité terrain fournis par des experts du domaine, à l’aide de métriques de distance de graphe sémantique.

Vos missions
  • Mener une enquête de pointe sur les LLM pour la génération de requêtes et l’évaluation des résultats des LLM.
  • Définir une méthodologie rigoureuse pour générer, traduire et comparer les requêtes dans le contexte des interactions homme-système.
  • Développer un cadre d’évaluation intégrant les requêtes générées par LLM, des données de réalité de terrain expertes et des outils de comparaison de graphes sémantiques.
  • Appliquer et valider le cadre d’évaluation sur un cas d’utilisation réel de Thales, afin d’évaluer la performance et la fiabilité des requêtes générées par LLM.
  • Analyser les résultats, identifier les limites et les améliorations potentielles, et documenter les conclusions.
Résultats Attendus
  • Une revue exhaustive de la littérature et une analyse de pointe.
  • Une méthodologie détaillée pour évaluer la génération de requêtes basée sur le LLM via l’analyse sémantique des graphes.
  • Un cadre d’évaluation et une panoplie d’outils mis en œuvre.
  • Résultats expérimentaux sur un cas critique pertinent d’utilisation du système.
  • Un rapport final résumant la méthodologie, les expériences et les recommandations.
Votre profil

Etudiant en Master 2 / 3e année d'école d'ingénieur ou équivalent, vous recherchez un stage de fin d'études de 6 mois.

Vous avez des connaissances initiales dans les domaines suivants : traitement du langage naturel, graphiques de connaissance, ontologies, grands modèles de langage et langages de requête (de préférence cyber) ?

Tous nos stages sont conventionnés et soumis à une gratification dont le montant est déterminé selon votre niveau d’études.

Thales, entreprise Handi-Engagée, reconnait tous les talents. La diversité est notre meilleur atout.

Obtenez votre examen gratuit et confidentiel de votre CV.

ou faites glisser et déposez votre fichier ici.

Similar jobs

Postes similaires à comparer

STAGE - Évaluation des grands modèles de langage pour les systèmes critiques via l’analyse sémantique des graphes (F/H)
STAGE - Évaluation des grands modèles de langage pour les systèmes critiques via l’analyse sémantique des graphes (F/H)

Thales Avionics, Inc. (AGS) • Palaiseau

Sur place
EUR 6 700 - 10 000
STAGE – Audit de confiance et détection d'incohérences dans l'espace latent (J-space) d'un agent LLM d'analyse tactique (H/F)
STAGE – Audit de confiance et détection d'incohérences dans l'espace latent (J-space) d'un agent LLM d'analyse tactique (H/F)

Thales Group • Palaiseau

Sur place
EUR 10 000 - 15 000
STAGE - Ingénieur de Recherche Détection de backdoors dans les grands modèles de langage (H/F)
STAGE - Ingénieur de Recherche Détection de backdoors dans les grands modèles de langage (H/F)

Thales Avionics, Inc. (AGS) • Palaiseau

Sur place
EUR 13 000 - 18 000
STAGE – Ingénieur de Recherche Détection de backdoors dans les grands modèles de langage (H/F)
STAGE – Ingénieur de Recherche Détection de backdoors dans les grands modèles de langage (H/F)

Thales Group • Palaiseau

Sur place
EUR 8 900 - 12 000
STAGE - Audit de confiance et détection d'incohérences dans l'espace latent (J-space) d'un agent LLM d'analyse tactique (H/F)
STAGE - Audit de confiance et détection d'incohérences dans l'espace latent (J-space) d'un agent LLM d'analyse tactique (H/F)

Thales Avionics, Inc. (AGS) • Palaiseau

Sur place
EUR 8 900 - 12 000
Stage - Orchestration des outils d'évaluation H/F (Stage)
Stage - Orchestration des outils d'évaluation H/F (Stage)

Thales Group • Meyreuil

Sur place
EUR 6 700 - 13 000
STAGE – Ingénieur en détection d’attaques adverses en temps réel : scores de confiance en Machine Learning (H/F) – 6 mois
STAGE – Ingénieur en détection d’attaques adverses en temps réel : scores de confiance en Machine Learning (H/F) – 6 mois

Thales Group • Palaiseau

Sur place
EUR 6 700 - 10 000
STAGE Détection d’anomalies et de cyber-intrusions par apprentissage de représentations sur graphes F/H
STAGE Détection d’anomalies et de cyber-intrusions par apprentissage de représentations sur graphes F/H

Thales Avionics, Inc. (AGS) • Gennevilliers

Sur place
EUR 11 000 - 17 000
STAGE - Développement d’une chaîne d’IA de transformation de vidéos en connaissances pour un système RAG multimodal basé sur des LLM - F/H
STAGE - Développement d’une chaîne d’IA de transformation de vidéos en connaissances pour un système RAG multimodal basé sur des LLM - F/H

Thales Avionics, Inc. (AGS) • Gémenos

Sur place
EUR 11 000 - 20 000
Gratification selon niveau d'études
Stage conventionné
STAGE - Ingénieur IA Générative pour l’Ingénierie - F/H
STAGE - Ingénieur IA Générative pour l’Ingénierie - F/H

Thales Group • Cholet

Sur place
EUR 12 000 - 18 000