STAGE - Développement d'un framework Multi-Agent Reinforcement Learning (MARL) - SIREHNA- F/H

Naval Group; Nantes; On-site; EUR 10,000 - 15,000; Full time

Benefits offered by this job

Gratification avantageuse

CSE dynamique

Restaurant d'entreprise

Transport 50%

Job summary

Naval Group recherche un stagiaire ingénieur/ Master pour développer un framework Multi-Agent Reinforcement Learning (MARL) au sein du service « Simulations Couplées et Outils » à Nantes.

Vous intégrerez une équipe responsable de l’architecture et du développement de modèles numériques et de l’IA, avec des missions allant de l’implémentation MARL à l’analyse de performances et à la rédaction de la documentation.

Qualifications

• Stage étudiant en bac+5 en IA/robotique ou équivalent.
• Maîtrise Python orienté objet, code propre et documenté.
• Connaissance de l’entraînement parrenforcement et agents autonomes.
• Connaissance des frameworks Gymnasium, PettingZoo, Ray RLlib et Stable-Baselines3.
• Compétences Git, Linux et documentation.

Responsibilities

• Développer un framework MARL pour coordonner des systèmes maritimes autonomes.
• Intégrer et tester des frameworks existants d'entraînement RL.
• Lancer des campagnes d’apprentissage et comparer les résultats.
• Rédiger le rapport et documenter le framework.
• Réaliser des outils de visualisation et analyse des métriques.

Skills

Python OO

Reinforcement Learning

MARL

Simulation frameworks

Git

Linux

Documentation

Anglais

Education

Bac+5 / Master ou diplôme d’ingénieur

Tools

Gymnasium

PettingZoo

Ray RLlib

Stable-Baselines3

Job description

Mots clés (ex : ingénieur commercial Paris)

STAGE - Développement d'un framework Multi-Agent Reinforcement Learning (MARL) - SIREHNA- F/H

Description du poste

Spécialité / Métier

Intitulé du poste

STAGE - Développement d'un framework Multi-Agent Reinforcement Learning (MARL) - SIREHNA- F/H

Description de la mission

SIREHNA est une filiale à 100% de Naval Group spécialisée dans les domaines de l'hydrodynamique, du contrôle dynamique de plateformes, de la mesure et de la maîtrise de l'environnement marin, des drones et de la robotique navale.

Votre sujet de stage :

Développement d'un framework Multi-Agent Reinforcement Learning (MARL) pour la coordination de systèmes maritimes autonomes.

Le service :

Le département "Simulations Couplées et Outils" est en charge de l'architecture et du développement de modèles numériques couplés (technico-opérationnels et multi-physiques) ainsi que de logiciels d'ingénierie. Il supervise les développements basés sur l'intelligence artificielle, pilote les activités de R&D, de validation et de support utilisateur à travers les étapes de maturité technologique (TRL), et assure la gestion structurée des données, des codes et des environnements de calcul.

Les étapes :

1. État de l'art et spécification de l'architecture
   • Développement et robustesse du simulateur
   • Implémentation de la physique 2D simplifiée : gestion des collisions, des limites de zone, des portées de capteurs et des contraintes cinématiques.
   • Création de scénarios tactiques de test (ex. : interception 2 vs 2, encerclement) paramétrables via des fichiers de configuration.
   • Développement de fonctions de visualisation permettant de suivre en temps réel les trajectoires, les décisions des agents et l'évolution des métriques de mission.
   • Optimisation de la boucle de simulation pour maximiser le débit de rafraîchissements et garantir la fluidité l'entraînement multi-agents.
2. Intégration et implémentation d'algorithmes MARL
   • Choix et intégration d'un framework open source existant d'entraînement (Ray/RLlib, StableBaselines3 avec extensions multi-agents).
   • Implémentation de baselines pour les scénarios de test.
   • Lancement de campagnes d'apprentissage sur les scénarios définis et comparaison des résultats.
3. Évaluation, analyse et restitution
   • Développement d'outils de visualisation : courbes d'apprentissage, taux de succès de mission, temps de complétion.
   • Analyse des stratégies tactiques émergentes (ex. : contournement, partage de cibles, couverture mutuelle).
   • Rédaction du rapport de stage et documentation du framework pour les futurs utilisateurs.

LES AVANTAGES SIREHNA POUR LES STAGES

• Une gratification avantageuse est prévue selon le niveau et le diplôme préparé
• Un comité social et économique (CSE) dynamique proposant des activités sociales et culturelles.
• Un environnement de travail agréable et un accès au restaurant d'entreprise avec une participation employeur.
• Une prise en charge des frais de transport (50 % du titre de transport en commun)

Vous préparez en tant qu’étudiant(e), un bac+5 (Master ou diplôme d’ingénieur) dans le domaine de l'intelligence artificielle, de la robotique, data sciences, machine learning, de la simulation numérique ou des systèmes de contrôle.

Vous avez des connaissances / expérience en:

• Programmation Python orientée objet, avec une exigence de code propre, structuré et documenté (typing, docstrings, tests unitaires).
• Compréhension de la boucle d'entraînement d'un modèle par apprentissage par renforcement (cycle observation → action → récompense → mise à jour) ; expérience en développement, entraînement et évaluation d'un agent autonome appréciée
• Connaissance des frameworks de simulation et d'entraînement (Gymnasium, PettingZoo, Ray/RLlib, Stable-Baselines3).
• Outils de développement logiciel (Git, Linux, documentation).

Qualités recherchées :

• Autonomie et capacité à prendre en main un code existant rapidement.
• Rigueur dans la conception (spécifications avant implémentation) et dans la rédaction (documentation, rapport).
• Esprit analytique et capacité à formuler des hypothèses pour interpréter les résultats d'entraînement.
• Curiosité scientifique et veille active sur les travaux récents (articles, dépôts open source).
• Esprit d'équipe et aisance dans les échanges techniques avec les ingénieurs du département.
• Capacité de restitution orale claire (points réguliers, soutenance finale).

Langues : Anglais, compréhension de publications scientifiques et de documentation technique ; rédaction de documentation technique.

Alors ce stage est fait pour vous ! Rejoignez nos équipes et construisez le naval de demain ! Chez Sirehna, vous serez accompagné·e de tuteurs et tutrices certifié·e·s et, à leurs côtés, vous bénéficierez d'une expérience à la fois formatrice et responsabilisante.

NOTRE PROCESSUS DE RECRUTEMENT

Après réception de votre CV, si votre profil retient notre attention, l'un de nos recruteurs vous contactera pour un entretien téléphonique. À l'issue de ce premier échange, vous pourrez être contacté·e pour passer un entretien (physique ou visioconférence) avec le manager du service concerné et le recruteur. Enfin, dès que nous aurons fait notre choix final, vous en serez informé·e dans les plus brefs délais. Dans le cadre de ce recrutement, l’accès au site donne lieu à une enquête administrative de sécurité.

Stagiaire

Date prévue de prise de fonction

Durée du contrat standard

6 mois

Localisation du poste

Implantation géographique

Europe, France, Pays de Loire, Nantes

Société

Critères candidat

Niveau d'expérience min. requis

Jeune diplômé / Débutant

Niveau d'études min. requis

Bac+5 / Ingénieur ou équivalent

Domaines d'études

Informatique / Système Information /Télécommunication

anglais (Intermédiaire)

Informations générales

Organisation

NAVAL GROUP
Acteur international du naval de défense, Naval Group est partenaire des États dans la maîtrise de leur souveraineté maritime. Grâce à des savoir-faire et des moyens industriels exceptionnels, il conçoit, réalise, intègre, maintient en service et modernise des sous-marins, des navires de surface et des drones ainsi que leurs systèmes, leurs armes et leurs équipements, jusqu'à la déconstruction.

UN ENVIRONNEMENT DE TRAVAIL POSITIF
Implantés sur 9 sites en France et dans 17 pays, nous valorisons un environnement de travail agréable, favorisant la diversité des profils, l'esprit d'équipe et le bien-être. Cela se concrétise par une mixité sociale, des accords pour la qualité de vie au travail, un engagement dans le développement professionnel via la formation continue et l'implication des collaborateurs et collaboratrices dans la mise en œuvre collective de notre stratégie de responsabilité sociétale de l'entreprise (RSE).

NOS CHIFFRES CLEFS
17 170 collaborateurs et collaboratrices
4,6 milliards d'euros de chiffre d'affaires