Senior AI Quality & Trust Engineer

Paradigma Digital S.L.; United States; Hybrid; USD 140,000 - 230,000; Full time

Benefits offered by this job

Seguro médico y beneficios flexibles

Job summary

Paradigma Digital S.L. busca un/a AI Trust Engineer Senior para garantizar la calidad, fiabilidad y seguridad de sistemas de IA, LLMs y arquitecturas agénticas, cubriendo observabilidad, evaluación y gobernanza a lo largo del ciclo de vida desde diseño hasta producción.

El candidato ideal posee experiencia con Langfuse, Grafana, OpenTelemetry y herramientas de evaluación como RagA/DeepEval, y puede trabajar en remoto o híbrido, colaborando con equipos multi-disciplinares.

Qualifications

• Experiencia práctica en IA generativa en producción.
• Conocimiento de métricas y evaluación de LLMs.
• Capacidad para definir métricas y gates automáticos.
• Familiaridad con CI/CD e integración de evaluaciones.

Responsibilities

• Diseñar y operar mecanismos de evaluación y gobernanza de IA.
• Monitorear calidad, rendimiento, latencia y costes de LLMs y agentes.
• Construir dashboards y alertas con Grafana.
• Aplicar OpenTelemetry en sistemas de IA.
• Desarrollar evaluaciones y benchmarks reproducibles.
• Integrar quality gates en pipelines CI/CD.

Skills

AI Quality Engineering

Software Engineering

MLOps

Observability

IA/DS engineering

Python

Tools

Langfuse

Grafana

OpenTelemetry

Python

Job description

Paradigma Digital S.L. busca un/a AI Trust Engineer Senior para garantizar la calidad, fiabilidad y seguridad de sistemas de IA, LLMs y arquitecturas agénticas, cubriendo observabilidad, evaluación y gobernanza a lo largo del ciclo de vida desde diseño hasta producción.

El candidato ideal posee experiencia con Langfuse, Grafana, OpenTelemetry y herramientas de evaluación como RagA/DeepEval, y puede trabajar en remoto o híbrido, colaborando con equipos multi-disciplinares.