Data Scientist Junior H/F

Banque de France; Paris; Sur place; EUR 8 900 - 11 000; Temps partiel

Résumé du poste

La Banque de France, Direction Générale du Système d'Information, DDSA, propose un stage visant à étudier les biais des grands modèles de langage (LLM) entraînés sur des corpus français ou européens et à évaluer leur influence sur l'analyse des données.

Le stage comparera la capacité de différents LLM à classifier les communications et analyses des banques, avec une approche méthodologique validée par des experts, et un potentiel d'évolution vers des projets de recherche.

Qualifications

• Formation supérieure en data science ou informatique exigée.
• Maîtrise des fondements mathématiques et statistiques des techniques IA.
• Projets et/ou stages démontrant des applications en IA/NLP.

Responsabilités

• Conduire une étude sur les biais des grands modèles de langage (LLM).
• Comparer la performance de différents LLM sur des communications bancaires.
• Collaborer avec l'équipe et documenter les résultats et les risques méthodologiques.

Connaissances

Deep Learning

NLP

Python

R

Communication

Formation

Formation en data science / informatique

Description du poste

Type de recrutement :

Stage

Domaine de compétences :

Donnée

Ville :

Paris

Département :

Paris

Description du poste:

Au sein de la Direction Générale du Système d'Information (DGSI), la Direction des Données et des Services Analytiques (DDSA), est en charge, en soutien aux métiers, d'offrir un ensemble de prestations et d'outils favorisant les initiatives d'innovation, le partage, l'exploitation et la valorisation des données.

La DDSA est partie prenante de l'action stratégique sur l'intelligence artificielle engagée par la Banque de France, regroupant également des expertises métiers, réglementaires, informatiques pour intégrer les solutions d'intelligence artificielle (IA) dans le Système d'Information de l'entreprise. Le stage s'inscrira dans ce contexte.

Ce stage vise à étudier si les grands modèles de langage (LLM) développent des biais lorsqu'ils sont entraînés sur des corpus de textes américains plutôt que sur des corpus français ou européens. L'idée est de vérifier si les données d'entraînement influencent la manière dont les modèles interprètent les communications des grandes banques commerciales.

Pour cela, le projet vise à comparer la capacité de différents LLM à classifier les communications et analyses des banques, en se basant sur une échelle de référence validée par des experts humains. Les modèles entraînés sur les textes de banques américaines sur les communications des banques françaises et européennes, et inversement.

L'objectif est de distinguer deux phénomènes : la performance du modèle (écart par rapport au jugement humain) et le biais éventuel (tendance systématique à juger les textes comme plus risqués ou rassurants). Si un biais apparaît après l'entraînement spécialisé mais pas dans le modèle de base, il pourra être attribué au corpus utilisé pour l'apprentissage.

Cette recherche permettra de mieux comprendre dans quelle mesure les données d'entraînement influencent les analyses produites par les LLM et d'identifier les précautions méthodologiques nécessaires pour leur utilisation future dans l'analyse économique, monétaire et surtout financière.

Profil recherché:

Formation recherchée :

• Vous êtes diplômé récent d'une formation supérieure en métier de la donnée ou informatique (Ingénieur ou formation universitaire) avec un goût pour l'économie (une double formation serait un plus)
• Votre cursus scolaire vous a permis de maîtriser les fondements mathématiques et statistiques des techniques science des données et IA et vous avez mis en pratique vos connaissances au travers de projets étudiants et/ou de stages.

Compétences :

• Prérequis : connaissance en Deep Learning et NLP avec une première expérience dans l'utilisation de modèles de type LLM
• Maitrise de la programmation avancée en R ou Python
• Aptitude à vulgariser une information complexe aussi bien à l'écrit qu'à l'oral, bonnes capacités rédactionnelles et de communication

Qualités :

• Esprit méthodique et rigueur d'analyse.
• Force de proposition, agilité, autonomie.
• Curiosité et créativité
• Goût du travail en équipe

Stage de 3 mois à 1/2 temps à pouvoir dès que possible

La Banque de France est une institution socialement responsable, attachée au respect de la diversité sous toutes ses formes, à la lutte contre les discriminations, à favoriser la parité Femme/Homme et à garantir un environnement de travail de qualité.

Des aménagements de poste peuvent être organisés pour tenir compte des handicaps des personnes recrutées.