Data Scientist – AI Expert – Level 3

Keoni; Paris; Hybrid; EUR 85,000 - 130,000; Full time

Job summary

Kéoni Consulting recherche un expert IA pour concevoir et affiner des modèles de langage souverains en cybersécurité, axés sur l’entraînement, l’alignement et l’évaluation.

Vous travaillerez sur des LLM/SLM, optimisant la précision et la sécurité des réponses, avec une approche data-centric et des pipelines d’évaluation renforcés.

Qualifications

• Fine-Tuning de Modèles (PEFT).
• LoRA et QLoRA pour adaptation à faible rang.
• Frameworks de fine-tuning rapide (Unsloth, Axolotl, TRL).
• Templates de discussion: ChatML et Alpaca.
• Alignement et RL: DPO, GRPO, PPO.
• Benchmarks et évaluation (MMLU, GSM8K).

Responsibilities

• Fine-tuning de LLMs open-source sur données cybersécurité.
• Alignement et réduction des hallucinations via RL.
• Formatage et structuration des données d'entraînement.
• Évaluation et benchmarking des modèles Cyber.

Skills

Fine-tuning

Data formatting

Alignment RL

Evaluation MMLU

Anglais pro

Français courant

Tools

Unsloth

Axolotl

TRL

Hugging Face

OpenRLHF

Job description

Contexte

Objectif global : Développer IA au sein du SOC 2

Au sein de notre SOC, nous intégrons des technologies d'Intelligence Artificielle Générative pour automatiser l'analyse de menaces, contextualiser les alertes de sécurité et assister nos analystes. Nous recherchons un(e) Expert(e) en IA spécialisé(e) dans l'entraînement, l'alignement et l'évaluation de Modèles de Langage (LLM/SLM) afin de concevoir des modèles souverains, ultra-spécialisés en cybersécurité.

MISSIONS:

• Fine-tuning de modèles : Adapter et spécialiser des LLM open-source (Llama, Mistral, Qwen...) sur des données de cybersécurité (logs, rapports CTI, playbooks).
• Alignement et limitation des hallucinations : Mettre en œuvre des techniques d'apprentissage par renforcement pour s'assurer que les modèles génèrent des réponses précises, sécurisées et sans biais/hallucinations (crucial pour le SOC).
• Formatage et structuration des données : Définir et appliquer les meilleurs formats de prompt et de conversation pour l'entraînement.
• Évaluation et Benchmarking : Mettre en place des pipelines d'évaluation rigoureux pour mesurer la performance des modèles spécialisés "Cyber" par rapport aux standards du marché.

Compétences techniques :

• fine tuning model - Confirmé – Impératif
• Structuration & Formatage de Données - Confirmé – Impératif
• Alignement & Reinforcement Learning - Confirmé – Impératif
• Évaluation & Validation (MMLU / Benchmarking) - Confirmé - Impératif

Connaissances linguistiques :

• Anglais Professionnel (Impératif)
• Français Courant (Impératif)

PROFIL RECHERCHÉ : EXPERTISE TECHNIQUE IA (Hard Skills)

Le/la candidat(e) doit impérativement maîtriser les technologies et concepts suivants :

• A. Fine-Tuning de Modèles (PEFT)
• Maîtrise avancée des techniques d'adaptation à faible rang : LoRA et QLoRA.
• Pratique courante d'au moins un framework de fine-tuning rapide : Unsloth, Axolotl, ou TRL (Transformer Reinforcement Learning d'Hugging Face).
• B. Structuration & Formatage de Données
• Expertise dans l'utilisation des formats de templates de discussion, notamment ChatML et Alpaca, pour structurer les datasets d'entraînement textuels.
• C. Alignement & Reinforcement Learning (Contrôle des Hallucinations)
• Solide expérience dans l'optimisation des réponses (Constraint-based génération & Alignment) via les méthodes : DPO (Direct Preference Optimization), GRPO (Group Relative Policy Optimization) et PPO (Proximal Policy Optimization).
• Maîtrise des frameworks d'alignement : TRL, verl ou OpenRLHF.
• D. Évaluation & Validation (MMLU / Benchmarking)
• Capacité à concevoir des protocoles d'évaluation rigoureux.
• Utilisation de benchmarks standards (ex: MMLU, GSM8K) et mise en place de frameworks d'évaluation comparatifs internes (méthodologies de type Evaluation Arena / LMSYS, LLM-as-a-judge).

SKILLS SECONDAIRES & APPRÉCIÉS (Nice to Have)

• Sensibilité Cybersécurité : Expérience préalable ou fort intérêt pour les problématiques SOC (MITRE ATT&CK, analyse de logs, détection d'intrusions).
• Stack MLOps : Connaissance de plateformes comme Hugging Face Hub, vLLM, Ollama ou Triton pour le déploiement et l'inférence optimisée.
• Développement : Excellente maîtrise de Python et de PyTorch.

SOFT SKILLS:

• Rigueur scientifique : Rigueur absolue sur la qualité des données et la reproductibilité des benchmarks.
• Communication : Capacité à vulgariser les concepts IA complexes auprès de profils purement cybersécurité (Analystes SOC, RSSI).
• Autonomie : Capacité à délivrer dans un environnement R&D agile.

Candidature : CV+ LM + Copie des diplômes à envoyer à [e-mail]

Crée en 2008, Kéoni Consulting est une société de conseil et d’ingénierie informatique spécialisée dans le secteur de la banque, de la finance de marché, et de l’assurance, et de l'industrie. Nous sommes le partenaire dans la transformation digitale des grands Comptes. Nous les aidons à transformer leur modèle économique, aligner vos processus opérationnels, sélectionner les meilleures technologies, atténuer et palier les risques liés au digital.

Kéoni Consulting aide les entreprises à : Faire la différence Innover et créer Réinventer votre business Satisfaire les clients Gagner en avantages compétitifs Devenir le leader de leur secteur Devenir le leader de votre secteur Notre activité couvre la totalité du cycle de vie des systèmes d’informations (Pilotage et Gestion de projet, Conseil en MOA, Conception, Réalisation, Maintenance, Production Exploitation).