STAGE - Apprentissage profond par renforcement pour l'ordonnancement des communications dans de[...]

Thales; Gennevilliers; Sur place; EUR 40 000 - 60 000; Plein temps

Résumé du poste

Une entreprise technologique leader à Gennevilliers cherche un stagiaire pour un projet sur l'apprentissage profond par renforcement dans des réseaux 5G/6G. Vous travaillerez sur l'optimisation d'algorithmes et l'intégration de nouveaux mécanismes de communication. Ce stage est destiné aux étudiants en Master 2 avec de bonnes bases en mathématiques et une forte motivation pour la recherche.

Prestations

Gratification selon le niveau d’études

Environnement inclusif et bienveillant

Qualifications

• En dernière année d’un cursus grande école ou en Master 2 avec une forte composante mathématique.
• Connaissances en apprentissage profond par renforcement (DRL).
• Motivation pour la recherche et résolution de problèmes.

Responsabilités

• Comprendre le modèle du système et utiliser le simulateur existant.
• Proposer des modifications pour intégrer les nouveaux mécanismes.
• Évaluer les solutions par simulations.

Connaissances

Apprentissage profond

Python

Résolution de problèmes

Autonomie

Formation

Master 2 en mathématiques ou équivalent

Description du poste

Lieu : Gennevilliers, France Construisons ensemble un avenir de confiance

Thales est un leader mondial des hautes technologies spécialisé dans trois secteurs d’activité : Défense & Sécurité, Aéronautique & Spatial, et Cyber & Digital. Il développe des produits et solutions qui contribuent à un monde plus sûr, plus respectueux de l’environnement et plus inclusif. Le Groupe investit près de 4 milliards d’euros par an en Recherche & Développement, notamment dans des domaines clés de l’innovation tels que l’IA, la cybersécurité, le quantique, les technologies du cloud et la 6G. Thales compte près de 81 000 collaborateurs dans 68 pays.

Nos engagements, vos avantages

• Notre savoir-faire technologique
• Notre attention portée à l’équilibre des collaborateurs
• Un environnement inclusif et bienveillant
• Un engagement sociétal et environnemental reconnu (Thales Solidarity, indice CAC 40 ESG…)

Votre quotidien

Le Campus de Gennevilliers est le cœur des activités de conception, de développement et de soutien des grands systèmes de défense : radiocommunications, réseaux et systèmes d’infrastructure résilients, communications par satellite, combat collaboratif et cybersécurité. Situé au nord de Paris, il est rapidement accessible en transports en commun.

Le Centre de Compétences Hardware & Logiciel embarqué de Thales SIX GTS France SAS recherche un/une:

Stagiaire – Apprentissage profond par renforcement pour l’ordonnancement des communications dans des réseaux de type 5G/6G – 6 mois

Basé à Gennevilliers.

Vos missions

Une des missions du centre de compétence Hardware Technologies, Tools & Engineering, consiste à définir des protocoles radio et des traitements numériques du signal qui seront utilisés dans les équipements, leur implémentation et leurs évolutions.

Dans le contexte des réseaux de communication sans fil, nous étudions des solutions pour ordonnancer les communications des utilisateurs, c’est-à-dire leur attribuer des ressources temporelles et/ou fréquentielles pour communiquer. Ce problème a été historiquement traité à l’aide d’heuristiques ayant des capacités limitées. Depuis 2017, de nombreuses solutions d’ordonnancement basées sur du DRL ont été proposées dans la littérature.

Nous avons proposé dans une solution utilisant une architecture neuronale de type transformer, entraînée à l’aide d’un algorithme de Deep Q-Learning, et nous souhaiterions enrichir ces travaux via l’intégration de mécanismes de communication avancés tels que les hybrid automatic repeat request (HARQ).

Votre mission sera d’abord de comprendre le modèle du système ainsi que la solution proposée dans [1] et de prendre en main le simulateur existant. Ensuite, l’objectif sera d’enrichir le simulateur, et de proposer des modifications dans l’algorithme d’apprentissage pour intégrer les nouveaux mécanismes envisagés. La mission s’organisera comme suit:

• Une analyse du modèle du système de [1] et la prise en main du simulateur existant.
• La proposition et l’implémentation de modifications pour intégrer les nouveaux mécanismes.
• L’évaluation par simulations des solutions proposées.

Mon profil

Vous êtes en dernière année d’un cursus grande école ou en Master 2 avec une forte composante mathématique et idéalement un volet d’initiation à la recherche?

Vous avez abordé dans votre formation l’apprentissage profond par renforcement (DRL)? Vous avez réalisé des projets ou stages dans un de ses domaines?

Vous avez envie de développer vos compétences au travers d’un sujet technologique passionnant portant sur des techniques modernes pour les communications sans fil dans des réseaux de type 5G/6G?

Vous avez une forte motivation pour la recherche?

Vous aimez étudier et résoudre des problèmes nouveaux?

Vous êtes reconnu pour votre autonomie, votre proactivité votre créativité?

Vous avez des bases solides en apprentissage profond, en Python, et des compétences en communications numérique?

Alors ce stage est fait pour vous!

Tous nos stages sont conventionnés et soumis à une gratification dont le montant est déterminé selon votre niveau d’études. Thales, entreprise Handi-Engagée, reconnait tous les talents. La diversité est notre meilleur atout. Postulez et rejoignez nous !