Staff AI Engineer — Agent Evaluation Platform

Doctolib (France)

Paris, Levallois-Perret

Presencial

EUR 120 000 - 180 000

Tempo integral

Há 3 dias
Torna-te num dos primeiros candidatos

Uma candidatura completa num minuto

Currículo e carta de apresentação personalizados, prontos a enviar.

Ultrapassa os filtros ATS

Vantagens oferecidas por esta oferta de emprego

Health insurance
Vacation days
Lunch vouchers
Transport subsidy
DoctoGrowth

Resumo da oferta

Doctolib recrute un Staff AI Software Engineer pour l'équipe EvalX afin de mesurer et améliorer la qualité et la sécurité des systèmes IA dans les produits patient et professionnel de santé. Vous travaillerez à l'intersection d'ingénierie de plateforme, IA appliquée et équipes produit.

Vous concevrez des outils d'évaluation de production, collaborerez avec les équipes produit et contribuerez à des pratiques d'évaluation robustes pour des systèmes agentiques et des assistants IA.

Qualificações

  • 6+ années d'expérience en développement logiciel, avec Python privilégié.
  • Expérience de l'évaluation pour des systèmes basés sur LLM ou agentiques.
  • Compréhension des meilleures pratiques de développement logiciel et d'outillage.

Responsabilidades

  • Concevoir, livrer et exploiter des outils d'évaluation en production (APIs, services, CI/CD) utilisés par les équipes IA.
  • Travailler avec les équipes produit pour évaluer les pratiques actuelles et définir des plans d'amélioration.
  • Concevoir des stratégies d'évaluation pour des systèmes agentiques, en combinant vérifications déterministes et revue humaine.
  • Construire des capacités d'échantillonnage, de surveillance de la représentativité des jeux de données et de détection des décalages de distribution.
  • Aider les équipes à définir des métriques de qualité et des seuils de qualité fiables tout au long du cycle de développement.
  • Transformer les besoins récurrents en capacités de plateforme self-service et mesurer l'adoption.

Conhecimentos

Python
LLM evaluation

Descrição da oferta de emprego

Doctolib recrute un Staff AI Software Engineer pour l'équipe EvalX afin de mesurer et améliorer la qualité et la sécurité des systèmes IA dans les produits patient et professionnel de santé. Vous travaillerez à l'intersection d'ingénierie de plateforme, IA appliquée et équipes produit.

Vous concevrez des outils d'évaluation de production, collaborerez avec les équipes produit et contribuerez à des pratiques d'évaluation robustes pour des systèmes agentiques et des assistants IA.

Obtém a tua avaliação gratuita e confidencial do currículo.

ou arrasta e larga o ficheiro aqui.

Similar jobs

Ofertas semelhantes que vale a pena comparar

Staff AI Engineer: Build Safe Healthcare AI Eval Tools
Staff AI Engineer: Build Safe Healthcare AI Eval Tools

Doctolib • Levallois-Perret

Presencial
EUR 100 000 - 160 000
Health insurance
Vacation days: 25 days + RTT
Mental health and coaching services
+7
Staff AI Engineer — Evaluation & Quality for AI Products
Staff AI Engineer — Evaluation & Quality for AI Products

Doctolib • Paris

Presencial
EUR 90 000 - 130 000
Health insurance
Paid vacation
Mental health & coaching services
+2
Staff AI Platform Engineer — Evaluation & Tools (Healthcare)
Staff AI Platform Engineer — Evaluation & Tools (Healthcare)

Doctolib • Paris

Presencial
EUR 120 000 - 170 000
Health insurance
Vacation days (25)
Mental health support
+7
Senior AI Engineer - Healthcare AI Agents (Nantes)
Senior AI Engineer - Healthcare AI Agents (Nantes)

Doctolib • Nantes

Híbrido
EUR 70 000 - 110 000
Health insurance
Lunch vouchers
RTT days
+2
Staff AI Engineer: Build Production ML Evaluation Tools
Staff AI Engineer: Build Production ML Evaluation Tools

Doctolib • Paris

Presencial
EUR 90 000 - 130 000
Health insurance
Paid vacation 25 days
RTT (reduction of working time)
+7
Staff AI Engineer - Agent Evaluation Platform (x/f/m)
Staff AI Engineer - Agent Evaluation Platform (x/f/m)

Doctolib • Paris

Presencial
EUR 90 000 - 130 000
Health insurance
Paid vacation
Mental health & coaching services
+2
Staff AI Engineer - Agent Evaluation Platform (x/f/m)
Staff AI Engineer - Agent Evaluation Platform (x/f/m)

Doctolib • Levallois-Perret

Presencial
EUR 100 000 - 160 000
Health insurance
Vacation days: 25 days + RTT
Mental health and coaching services
+7
AI Evaluation Engineer — Agentic Systems (H/F)
AI Evaluation Engineer — Agentic Systems (H/F)

Dhm IT • Neuilly-sur-Seine

Híbrido
EUR 70 000 - 95 000
Remote AI Evaluation Engineer — Multi-Agent QA
Remote AI Evaluation Engineer — Multi-Agent QA

Dhm IT • Neuilly-sur-Seine

Híbrido
EUR 70 000 - 95 000
Senior AI Engineer — Architect of Healthcare AI Assistants
Senior AI Engineer — Architect of Healthcare AI Assistants

Doctolib • Nantes

Presencial
EUR 90 000 - 130 000
Free comprehensive health insurance
ParentCare program
Mental health support
+6