AI QA Automation Engineer for Generative AI & RAG Testing

Jobtailor; Aguascalientes; Presencial; MXN 600.000 - 900.000; Jornada completa

Descripción de la vacante

Jobtailor está buscando un/a profesional experimentado/a en QA de IA para diseñar, desarrollar y mantener frameworks de automatización de pruebas para aplicaciones web, APIs y soluciones basadas en IA. Colaborarás con Desarrollo, Data Science y ML para asegurar la calidad de soluciones IA.

Se valorará experiencia en pruebas funcionales, de integración y End-to-End, así como en validación de modelos y métricas de calidad.

Formación

• Experiencia como profesional experimentado en QA de IA y automatización de pruebas.
• Conocimientos en frameworks de pruebas y en herramientas para IA.
• Certificaciones ISTQB y Azure AI Engineer son deseables.
• Capacidad para trabajar en equipos multidisciplinarios.

Responsabilidades

• Diseñar y mantener marcos de automatización de pruebas.
• Validar modelos y soluciones IA.
• Ejecutar pruebas de end-to-end e integración.
• Colaborar con Dev, Data Science y ML.

Conocimientos

Pensamiento analítico

Atención al detalle

Comunicación efectiva

Trabajo colaborativo

Educación

ISTQB Certification

Microsoft Azure AI Engineer Associate (AI-102)

Herramientas

Promptfoo

DeepEval

LangSmith

OpenAI Evals

Azure AI Search

Pinecone

Vector Databases

LangChain

Semantic Kernel

Databricks

Descripción del empleo

Jobtailor está buscando un/a profesional experimentado/a en QA de IA para diseñar, desarrollar y mantener frameworks de automatización de pruebas para aplicaciones web, APIs y soluciones basadas en IA. Colaborarás con Desarrollo, Data Science y ML para asegurar la calidad de soluciones IA.

Se valorará experiencia en pruebas funcionales, de integración y End-to-End, así como en validación de modelos y métricas de calidad.