Senior ML Engineer - AI Health Orchestration & LLMs

Doctolib GmbH; Paris; Hybrid; EUR 110,000 - 150,000; Full time

Benefits offered by this job

Health insurance

25 days vacation

RTT days

Job summary

Doctolib sucht einen Senior Machine Learning Engineer für das Orchestrations-Team im Bereich Applied AI & LLMs in Paris. Sie definieren Evaluationsstrategien, bauen automatisierte Pipelines und arbeiten eng mit Modell-Entwicklern zusammen, um Sicherheit, Zuverlässigkeit und Nützlichkeit sicherzustellen.

Sie verfügen über einen MSc/PhD in CS/ML/Data Science, 7+ Jahre Erfahrung mit großen Sprachmodellen und Erfahrung in der Evaluation agentischer Systeme; fließendes Englisch wird vorausgesetzt.

Qualifications

• MSc or PhD in Computer Science, Machine Learning, Data Science, or related field
• 7+ Jahre praktische Erfahrung mit großen Sprachmodellen (GPT, Claude, Llama, BERT-ähnliche Architekturen)
• Nachweisliche Erfahrung bei der Evaluierung agentischer/logischer Systeme
• Starke Fähigkeiten in Versuchsplanung, Metrik-Definition und Evaluationsautomatisierung
• In der Lage, Forschung und Produktion zu verbinden und Produktentscheidungen zu beeinflussen
• Ausgezeichnete Kommunikationsfähigkeiten, kooperatives Arbeiten, fließendes Englisch

Responsibilities

• Definition und Verantwortung der Evaluationsstrategie für unser AI-Agentensystem – Metriken, Protokolle, Datensätze und Tools
• Implementierung und Wartung automatisierter Evaluations-Pipelines zur Überwachung von Modellqualität, Sicherheit und Alignment
• Durchführung systematischer Experimente zu Reasoning, Faktentreue, Robustheit und User Experience
• Enge Zusammenarbeit mit Modell-Entwicklern und Forschern zur Ableitung von Verbesserungen
• Beitrag zu Forschung und interner Wissensweitergabe zu Evaluationsmethoden für LLMs

Job description

Doctolib sucht einen Senior Machine Learning Engineer für das Orchestrations-Team im Bereich Applied AI & LLMs in Paris. Sie definieren Evaluationsstrategien, bauen automatisierte Pipelines und arbeiten eng mit Modell-Entwicklern zusammen, um Sicherheit, Zuverlässigkeit und Nützlichkeit sicherzustellen.

Sie verfügen über einen MSc/PhD in CS/ML/Data Science, 7+ Jahre Erfahrung mit großen Sprachmodellen und Erfahrung in der Evaluation agentischer Systeme; fließendes Englisch wird vorausgesetzt.