MLOps / LLMOps Engineer - Azure AI & Copilot Studio

Orcan Intelligence Ltd; Paris; On-site; EUR 90,000 - 120,000; Full time

Job summary

Free-Work recherche un Ingénieur MLOps / LLMOps pour piloter des architectures IA sur Azure et Copilot Studio. Vous instrumenterez et optimiserez la récupération, évaluerez la latence et assurerez l’ancrage des réponses dans les sources métier.

Vous distinguerez les limites de la plateforme des paramètres et proposerez une architecture cible, tout en assurant le déploiement, le monitoring et le transfert de compétences aux équipes internes.

Qualifications

• Expérience avérée en MLOps / LLMOps et deployment de modèles d’IA
• Maîtrise d’Azure AI et de Copilot Studio pour concevoir et opérer des pipelines
• Bonne connaissance des pipelines CI/CD, du versioning des prompts et de la gouvernance des modèles

Responsibilities

• Instrumenter et établir une base de référence de l’agent existant: qualité de récupération, latence et ancrage des réponses dans les sources
• Distinguer limites plateforme vs réglages et expliquer clairement au public non technique
• Proposer une architecture cible et optimiser au sein de Copilot Studio ou basculer vers Azure AI Foundry / Azure OpenAI avec couche de récupération
• Construire la chaîne de traitement et de récupération en production: ingestion, découpage, embeddings, indexation, recherche hybride et reranking
• Mettre en place un dispositif d’évaluation avec jeux de données et tests de non-régression
• Implémenter CI/CD, séparation des environnements, versioning des prompts et procédures de retour arrière
• Déployer le monitoring et l’observabilité: coût et tokens par requête, défaillances et dérive
• Garantir la conformité localisation données et gestion des accès, avec traçabilité et gouvernance des modèles
• Documenter la solution et assurer le transfert de compétences vers les équipes internes

Skills

MLOps

LLMOps

Azure AI

CI/CD

Tools

Copilot Studio

Azure OpenAI

Job description

Free-Work recherche un Ingénieur MLOps / LLMOps pour piloter des architectures IA sur Azure et Copilot Studio. Vous instrumenterez et optimiserez la récupération, évaluerez la latence et assurerez l’ancrage des réponses dans les sources métier.

Vous distinguerez les limites de la plateforme des paramètres et proposerez une architecture cible, tout en assurant le déploiement, le monitoring et le transfert de compétences aux équipes internes.