STAGE - Ingénieur.e R&D en Intelligence Artificielle (LLM, Deep Learning) (F/H)

Dassault Systèmes; Vélizy-Villacoublay; On-site; EUR 10,000 - 17,000; Part time

Job summary

Dassault Systèmes, DELMIA Generative Experiences, recherche un stagiaire Ingénieur R&D en Intelligence Artificielle (LLM, Deep Learning) pour explorer les workflows industriels et évaluer des architectures IA. Vous rejoindrez une équipe de chercheurs et développeurs et contribuerez à l’innovation dans l'industrie 4.0.

Le stage de 6 mois couvre la curation de données, le pipeline RAG, le fine-tuning de LLMs/SLMs et des expériences comparatives, avec une attention particulière à la confidentialité

Qualifications

• Connaissances avancées en Deep Learning, en particulier les Transformers et les modèles multimodaux.
• Bonne compréhension des systèmes d'agents basés sur les LLMs.

Responsibilities

• Curation de données et constitution d'un corpus industriel propre (process, nomenclatures, instructions).
• Construction d'un pipeline RAG solide (indexation, retrieval, reranking).
• Campagnes de fine-tuning de LLMs/SLMs avec PEFT (LoRA).
• Conception et exécution d'évaluations head-to-head sur différentes approches (LLM, SLM, RAG).
• Synthèse et recommandations pour cadrer les choix selon les tâches et la confidentialité des données.

Skills

Deep Learning

Transformers

LLMs

Education

Dernière année d'école d'ingénieur ou de master

Tools

Hugging Face

LoRA

QLoRA

RAG

Job description

STAGE - Ingénieur.e R&D en Intelligence Artificielle (LLM, Deep Learning) (F/H)

Afin de maintenir le caractère innovant des solutions du département IA de DELMIA Generative Experiences, l'équipe recherche actuellement un(e) stagiaire Ingénieur R&D en Intelligence Artificielle (LLM, Deep Learning). Vous rejoignez, dans une ambiance joyeuse et créative, une équipe de développeurs et de chercheurs qui conçoit les briques technologiques des solutions pour l'industrie 4.0, et vous expérimentez les dernières avancées en IA.

L'intégration des modèles de langage dans les workflows industriels pose une question récurrente : faut-il s'appuyer sur de grands modèles généralistes (LLMs), spécialiser de plus petits modèles (SLMs) par fine-tuning, ou augmenter un modèle existant par RAG ? Chaque option offre un compromis différent entre coût, performance, déployabilité et maîtrise des données.

Pendant 6 mois, vous évaluez ces approches de façon empirique et rigoureuse sur des tâches propres au domaine manufacturier de DELMIA (planification de process, génération d'instructions de travail, exploitation de nomenclatures et de connaissances métier). Une question centrale : des SLMs spécialisés, plus légers et déployables on-premise, peuvent-ils rivaliser avec de grands modèles généralistes sur des tâches ciblées ?

Vous êtes pleinement intégré(e) à l'équipe R&D et pilotez l'ensemble de la démarche expérimentale, en autonomie encadrée. Concrètement :

• Curation de données : vous constituez, nettoyez et structurez un corpus représentatif de données industrielles (documents de process, nomenclatures, instructions de travail, données CAO/PLM), et définissez les formats d'entraînement et d'évaluation adaptés à chaque tâche.
• Construction du pipeline RAG : vous mettez en place une baseline RAG solide (indexation, retrieval, éventuellement reranking), qui sert de référence face aux approches par fine-tuning.
• Expérimentation de fine-tuning : vous conduisez des campagnes de fine-tuning de LLMs et de SLMs avec des techniques efficientes en paramètres (LoRA / QLoRA), en explorant les hyperparamètres, la taille des modèles et le volume de données nécessaire pour atteindre un niveau de performance cible.
• Benchmark comparatif : vous concevez et exécutez une évaluation head-to-head rigoureuse des différentes approches (LLM généraliste, SLM fine-tuné, RAG, combinaisons hybrides), sur des métriques couvrant la qualité, le coût d'inférence, la latence et la déployabilité.
• Synthèse et recommandations : vous formalisez un cadre de décision documenté, qui permet de choisir la bonne approche selon le type de tâche, les contraintes de déploiement et les enjeux de confidentialité des données.

Vous êtes en dernière année d'école d'ingénieur ou de master, passionné(e) d'informatique et de programmation, créatif(ve) et autonome.

Compétences requises

• Connaissances avancées en Deep Learning, en particulier sur les Transformers et les modèles multimodaux.
• Bonne compréhension des systèmes d'agents basés sur les LLMs.

Compétences appréciées

• Maîtrise de l'écosystème Hugging Face, du fine-tuning efficient (PEFT / LoRA) et du RAG.
• Connaissance du domaine manufacturier / PLM.

Nous recherchons une personnalité dynamique, force de proposition, disposée à échanger techniquement avec le reste de l'équipe. La curiosité et la persévérance sont des éléments cruciaux pour la réussite d'un projet R&D ambitieux. Une bonne maîtrise de l'anglais, à l'écrit comme à l'oral, est importante.