Quality Engineer – IA Generativa

Viterbit; San Isidro; Presencial; PEN 60.000 - 100.000; Jornada completa

Descripción de la vacante

Viterbit, con sede en Lima, busca un/a Quality Engineer – IA Generativa para garantizar la calidad de soluciones basadas en inteligencia artificial en proyectos para entidades financieras. La posición requiere diseñar y ejecutar pruebas para modelos LLM y sistemas RAG, evaluar precisión y seguridad, y liderar la ratificación post producción.

El/la candidato/a trabajará en un entorno de IA generativa, colaborando con equipos técnicos y de negocio para asegurar la entrega de soluciones confiables

Formación

• Capacidad para diseñar pruebas funcionales y automatizadas para IA.
• Conocimiento de modelos LLM y sistemas RAG utilizados en IA generativa.
• Experiencia evaluando precisión, coherencia y relevancia de respuestas generadas.

Responsabilidades

• Diseñar estrategias de pruebas funcionales, automatizadas y no funcionales para soluciones basadas en IA Generativa.
• Definir y ejecutar casos de prueba para modelos LLM, sistemas RAG, asistentes conversacionales y agentes inteligentes.
• Evaluar la precisión, coherencia, relevancia y completitud de las respuestas generadas por los modelos.
• Gestionar defectos, incidencias y riesgos de calidad, y comunicar resultados a equipos técnicos y de negocio.
• Liderar las actividades de ratificación y seguimiento post producción.

Conocimientos

Pruebas funcionales

Pruebas automatizadas

Pruebas no funcionales

IA Generativa

Modelos LLM

Sistemas RAG

Validación de respuestas

Herramientas

Selenium

JMeter

Postman

Jenkins

Descripción del empleo

Apoyamos a nuestro cliente, empresa líder del sector tecnología y consultoría, en la búsqueda de un/a Quality Engineer – IA Generativa para asegurar la calidad de soluciones basadas en inteligencia artificial en un proyecto para una importante entidad del sector financiero.

Funciones principales

• Diseñar estrategias de pruebas funcionales, automatizadas y no funcionales para soluciones basadas en IA Generativa.
• Definir y ejecutar casos de prueba para modelos LLM, sistemas RAG, asistentes conversacionales y agentes inteligentes.
• Evaluar la precisión, coherencia, relevancia y completitud de las respuestas generadas por los modelos.
• Participar en la definición y el refinamiento de historias de usuario y criterios de aceptación.
• Ejecutar pruebas de rendimiento, escalabilidad y seguridad, incluyendo validaciones de comportamiento de los modelos.
• Gestionar defectos, incidencias y riesgos de calidad, y comunicar los resultados a los equipos técnicos y de negocio.
• Liderar las actividades de ratificación y seguimiento post producción.