Senior MLOps / LLMOps Engineer (all genders)

adesso SE; Rostock; On-site; EUR 60,000 - 80,000; Full time

Job summary

Ein führendes IT-Unternehmen in Rostock sucht einen erfahrenen Entwickler für ML- und LLM-Systeme. Verantwortlich für die gesamte Lebensdauer der Systeme, einschließlich Deployment und Monitoring, erfordert dieser Job mindestens 3 Jahre Erfahrung im Enterprise-Bereich sowie Expertise in ML-Prozessen und CI/CD-Toolchains. Gute Deutsch- und Englischkenntnisse sind notwendig. Ihre Rolle umfasst auch die Entwicklung von Qualitätsmessungen und die Sicherstellung von Reproduzierbarkeit sowie Monitoring-Strategien.

Qualifications

• Mindestens 3 Jahre Erfahrung im Betrieb produktiver ML- oder LLM-Systeme.
• Verständnis für ML/LLM-Qualitätsmanagement und Drift Detection.
• Souveräner Umgang mit CI/CD-Toolchains und Cloud-Umgebungen.
• Strukturierte Arbeitsweise mit hohem Engineering-Anspruch.
• Sichere Kommunikation auf Deutsch und Englisch.

Responsibilities

• Verantwortung für Versionierung, Deployment und Monitoring von ML- und LLM-Systemen.
• Implementierung automatisierter Trainings- und Deployment-Pipelines.
• Konzeption von Testsets für objektive Qualitätsmessung.
• Implementierung von Monitoring für Modell- und Daten-Drift.
• Sicherung von Auditierbarkeit und kontrollierten Rollbacks.

Skills

Modell-Lifecycle-Management

Drift Detection

Prompt-Evaluation

GitLab CI

Weights & Biases

MLflow

Container-Umgebungen

Cloud-Umgebungen

Education

Studium in Informatik, Data Engineering oder Software Engineering

Job description

DEINE ROLLE

• End-to-End-Lifecycle steuern: Du verantwortest Versionierung, Deployment, Monitoring und kontinuierliche Weiterentwicklung von ML- und LLM-Systemen im produktiven Betrieb.
• CI/CD für AI etablieren: Du implementierst automatisierte Trainings-, Test- und Deployment-Pipelines inklusive Modell- und Prompt-Versionierung.
• Evaluierungsarchitekturen entwickeln: Du konzipierst strukturierte Testsets, Golden Datasets und Metriken zur objektiven Qualitätsmessung von ML- und RAG-Systemen.
• Observability sichern: Du implementierst Monitoring für Modell-Drift, Daten-Drift, Latenz, Tokenverbrauch und Antwortqualität.
• Reproduzierbarkeit verankern: Du stellst Auditierbarkeit, Nachvollziehbarkeit und kontrollierte Rollbacks in AI-Systemlandschaften sicher.

DEIN PROFIL

• Ausbildung & Erfahrung: Du verfügst über ein abgeschlossenes Studium in Informatik, Data Engineering, Software Engineering oder einem vergleichbaren technischen Fachgebiet und mindestens 3 Jahre Erfahrung im Betrieb produktiver ML- oder LLM-Systeme im Enterprise-Umfeld.
• Fachwissen im ML/LLM-Qualitätsmanagement: Du verstehst Modell-Lifecycle-Management, Drift Detection, Prompt-Evaluation und experimentelle Vergleichsverfahren tiefgehend.
• Tech-Stack anwenden: Du arbeitest souverän mit MLflow oder Weights & Biases, CI/CD-Toolchains wie GitLab CI oder GitHub Actions sowie Container- und Cloud-Umgebungen.
• strukturierte Arbeitsweise: Du arbeitest qualitäts-, stabilitäts- und reproduzierbarkeitsorientiert mit hohem Engineering-Anspruch.
• KI Kompetenz: Du setzt KI-Tools in deinem Fachgebiet souverän ein, bewertest die Ergebnisse kritisch und unterstützt Kunden und adessi dabei, Potenziale von KI zu nutzen.
• Sprachkenntnisse: Du kommunizierst mündlich als auch schriftlich sicher und präzise auf Deutsch und Englisch.