Qa Engineer Ia

Universidad Tecnológica del Perú

Lima

Vor Ort

PEN 60.000 - 90.000

Vollzeit

Vor 2 Tagen
Sei unter den ersten Bewerbenden

Eine vollständige Bewerbung in einer Minute

Maßgeschneiderter Lebenslauf und Anschreiben – versandbereit.

Schaffe es an den ATS-Filtern vorbei

Benefits dieser Stelle

Descuentos Intercorp
Capacitación continua
Promoción interna

Zusammenfassung

La Universidad Tecnológica del Perú busca un QA Engineer IA con más de 3 años en QA de software e IA generativa. Diseñarás casos de prueba, automatizarás con Playwright y validarás APIs REST, integrando todo en flujos CI/CD.

Trabajarás en proyectos de IA, chatbots y sistemas basados en LLM, evaluando rendimiento, seguridad y trazabilidad en CRM Dynamics; se ofrecen beneficios y crecimiento profesional.

Qualifikationen

  • Más de 3 años en roles QA Software, con experiencia en IA generativa, chatbots o sistemas basados en LLM.
  • Experiencia diseñando casos de prueba, matrices de trazabilidad y datasets de prueba.
  • Experiencia definiendo evaluaciones reproducibles con golden datasets y rúbricas.
  • Experiencia automatizando pruebas con Playwright y pruebas de APIs REST.
  • Conocimientos en validación de transferencia y trazabilidad en CRM Dynamics.

Aufgaben

  • Definir la estrategia de QA por producto e iniciativa: riesgos, escenarios, criterios de entrada/salida, cobertura, datasets, evidencias y planes de regresión.
  • Analizar historias de usuario, especificaciones, prompts, flujos agénticos y criterios de aceptación; identificar escenarios positivos, negativos, de límite y de excepción.
  • Diseñar y ejecutar pruebas end-to-end de chat, voz, APIs, interfaces, herramientas del agente, handoff a humano e integraciones con plataformas externas.
  • Validar soluciones RAG y bases de conocimiento: relevancia de recuperación, fidelidad a fuentes, vigencia, respuestas sin soporte, citas cuando apliquen y comportamiento ante información insuficiente.
  • Evaluar agentes y LLM con conjuntos de preguntas de referencia (golden datasets), métricas y rúbricas: exactitud, completitud, groundedness, cumplimiento de instrucciones, tasa de resolución, escalamiento y consistencia.
  • Probar escenarios de seguridad y privacidad de IA: prompt injection, jailbreak, exposición de datos, acceso no autorizado, uso indebido de herramientas, filtración entre sesiones y protección de datos personales.
  • Ejecutar pruebas de integración y de contratos de APIs REST, autenticación/autorización, webhooks, payloads, errores, reintentos, timeouts e idempotencia donde aplique.
  • Diseñar pruebas específicas de voz y canales conversacionales: ASR/transcripción, latencia, interrupciones, silencio, variaciones de lenguaje, contexto multivuelta y transferencias a asesor.
  • Automatizar la regresión de flujos críticos con Playwright y pruebas de APIs; integrar su ejecución y reportes al pipeline CI/CD y controlar cambios de prompts, modelos y conocimiento.
  • Ejecutar pruebas de rendimiento, concurrencia, resiliencia y costos/consumo cuando aplique; identificar umbrales, degradación y oportunidades de mejora.

Kenntnisse

IA generativa
QA Software
Pruebas de APIs REST
Playwright
CI/CD
E2E testing
Dinamics CRM

Ausbildung

Ingeniería de Sistemas
Ingeniería de Software
Ciencias de la Computación

Tools

Playwright
Postman
CI/CD

Jobbeschreibung

La Unidad Corporativa de la Universidad Tecnológica del Perú, que forma parte del Grupo Intercorp y es parte del ranking de las mejores empresas para trabajar en el Perú según Great Place to Work, se encuentra en búsqueda del mejor talento, para ocupar la posición de ?QA Engineer IA?, a continuación, los detalles.

¿A quiénes buscamos?
  • Bachiller o Titulado en Ingeniería de Sistemas, Ingeniería de Software, Ciencias de la Computación o afines.
  • Indispensable contar con más de 3 años en roles como QA Software, con experiencia práctica demostrable probando aplicaciones IA generativa, chatbots o sistemas basados en LLM.
  • Indispensable contar con experiencia diseñando casos prueba, matrices de trazabilidad, datasets de prueba, pruebas negativas/de borde, gestión de defectos y reportes ejecutivos de calidad.
  • Indispensable contar con experiencia definiendo y ejecutando evaluaciones reproducibles con golden datasets, rúbricas, umbrales y revisión humana.
  • Indispensable contar con experiencia en automatización de pruebas (Playwright) y pruebas de APIs REST (Postman, y/o código) integradas a flujos de CI/CD.
  • Experiencia deseable con canales WhatsApp/telefonía y plataformas como Five9, Genesys Cloud o equivalentes, con validación de transferencias y trazabilidad en CRM Dynamics.
  • Experiencia deseable con frameworks de evaluación LLM/RAG (Ragas, DeepEval, promptfoo, LangSmith o equivalentes).
  • Experiencia deseable con servicios cloud (AWS, Azure o Databricks) y herramientas de performance (k6, JMeter o Gatling).
  • Deseable contar con Certificación ISTQB Foundation Level o formación equivalente en pruebas de software.
  • Deseable contar con especialización o cursos en aseguramiento de la calidad (QA), testing de software o inteligencia artificial aplicada.
  • Deseable contar con formación o certificación en herramientas de gestión de pruebas (Xray, Zephyr, TestRail) y en servicios cloud (AWS, Azure o Databricks).
¿Qué funciones realizarías?
  • Definir la estrategia de QA por producto e iniciativa: riesgos, escenarios, criterios de entrada/salida, cobertura, datasets, evidencias y planes de regresión.
  • Analizar historias de usuario, especificaciones, prompts, flujos agénticos y criterios de aceptación; identificar escenarios positivos, negativos, de límite y de excepción.
  • Diseñar y ejecutar pruebas end-to-end de chat, voz, APIs, interfaces, herramientas del agente, handoff a humano e integraciones con plataformas externas.
  • Validar soluciones RAG y bases de conocimiento: relevancia de recuperación, fidelidad a fuentes, vigencia, respuestas sin soporte, citas cuando apliquen y comportamiento ante información insuficiente.
  • Evaluar agentes y LLM con conjuntos de preguntas de referencia (golden datasets), métricas y rúbricas: exactitud, completitud, groundedness, cumplimiento de instrucciones, tasa de resolución, escalamiento y consistencia.
  • Probar escenarios de seguridad y privacidad de IA: prompt injection, jailbreak, exposición de datos, acceso no autorizado, uso indebido de herramientas, filtración entre sesiones y protección de datos personales.
  • Ejecutar pruebas de integración y de contratos de APIs REST, autenticación/autorización, webhooks, payloads, errores, reintentos, timeouts e idempotencia donde aplique.
  • Diseñar pruebas específicas de voz y canales conversacionales: ASR/transcripción, latencia, interrupciones, silencio, variaciones de lenguaje, contexto multivuelta y transferencias a asesor.
  • Automatizar la regresión de flujos críticos con Playwright y pruebas de APIs; integrar su ejecución y reportes al pipeline CI/CD y controlar cambios de prompts, modelos y conocimiento.
  • Ejecutar pruebas de rendimiento, concurrencia, resiliencia y costos/consumo cuando aplique; identificar umbrales, degradación y oportunidades de mejora.
¿En qué horario trabajarías?
  • Lunes a viernes de 8:30 am a 6:30 pm. (Modalidad Híbrida)
¿Por qué unirte a la UTP?
  • Atractivo salario: Reconocemos tu talento con una compensación por encima del mercado.
  • Disfruta de todos los beneficios de ley que te corresponden por ingresar al corporativo, en planilla desde el primer día.
  • Crecimiento profesional y capacitación constante: Desarrolla tu carrera en un entorno de aprendizaje continuo, con oportunidades de ascenso en UTP y Grupo Intercorp.
  • Descuentos corporativos y educativos: Beneficios exclusivos Intercorp y descuentos en programas de postgrado y formación continua.
  • Excelente clima laboral: Somos una empresa reconocida como Great Place To Work.
  • Trabajar con un equipo altamente calificado dentro de una infraestructura moderna y equipada con la mejor tecnología.

La UTP es una universidad inclusiva y libre de discriminación, que respeta la diversidad y autenticidad de cada uno de los colaboradores. ¡Más diversos, mejores equipos! Según resultados GPTW 2026.

Hol dir deinen kostenlosen, vertraulichen Lebenslauf-Check.

oder ziehe deine Datei hierhin.

Similar jobs

Ähnliche Jobs, die dir auch gefallen könnten

Qa Engineer
Qa Engineer

Universidad Tecnológica del Perú • Lima Metropolitana

Hybrid
PEN 60.000 - 90.000
Salario competitivo
Planilla desde el primer día
Crecimiento profesional y capacitación
+3
QA ENGINEER
QA ENGINEER

UTP • Lima Metropolitana

Hybrid
PEN 50.000 - 80.000
Salario competitivo
Beneficios de ley
Crecimiento profesional y capacitación
+1
ENGINEER AI
ENGINEER AI

UTP • Lima Metropolitana

Hybrid
PEN 90.000 - 140.000
Beneficios de ley
Descuentos educativos
Capacitación continua
+1
HEAD OF SOFTWARE DEVELOPMENT
HEAD OF SOFTWARE DEVELOPMENT

UTP • Lima Metropolitana

Vor Ort
PEN 250.000 - 400.000
Beneficios de ley
Crecimiento profesional
Descuentos educativos
+2
HEAD OF SOFTWARE DEVELOPMENT
HEAD OF SOFTWARE DEVELOPMENT

Universidad Tecnológica del Perú • Lima Metropolitana

Hybrid
PEN 300.000 - 540.000
Beneficios de ley
Descuentos corporativos y educativos
Capacitación constante
Ux/Ui Designer
Ux/Ui Designer

Universidad Tecnológica del Perú • Lima Metropolitana

Hybrid
PEN 47.000 - 87.000
Salario competitivo
Planilla desde día uno
Oportunidades de crecimiento
+2
Líder Técnico (Exp. Node Js, React, Aws)
Líder Técnico (Exp. Node Js, React, Aws)

Universidad Tecnológica del Perú • Lima

Hybrid
PEN 90.000 - 150.000
Beneficios de ley
Crecimiento profesional
Descuentos educativos
+1
ANALISTA DE DESARROLLO DOCENTE
ANALISTA DE DESARROLLO DOCENTE

UTP • Lima Metropolitana

Hybrid
PEN 40.000 - 60.000
Beneficios de ley
Capacitación constante
Descuentos en educación
+1
ESPECIALISTA SEO GEO e IA
ESPECIALISTA SEO GEO e IA

UTP • Lima Metropolitana

Hybrid
PEN 90.000 - 130.000
Beneficios legales de ley
Crecimiento profesional y capacitación
Descuentos educativos Intercorp
+2
Analista de Evaluación de Aprendizaje
Analista de Evaluación de Aprendizaje

Universidad Tecnológica del Perú • Lima Metropolitana

Hybrid
PEN 65.000 - 95.000
Salario competitivo
Beneficios de ley
Capacitación y crecimiento
+2