QA Automation Engineer (AI Testing)

Capgemini; Ciudad de México; Presencial; MXN 446.000 - 670.000; Jornada completa

Descripción de la vacante

Capgemini México busca un profesional de QA y automatización para diseñar y mantener frameworks de pruebas para aplicaciones web, APIs y soluciones en IA. El rol requiere validar IA Generativa, chatbots y modelos basados en LLMs, evaluando precisión y fiabilidad, con énfasis en detección de sesgos y alucinaciones.

Colaborarás con Data Science, ML e IA en un entorno de nube. Se trabajará en pipelines CI/CD, implementación de pruebas continuas y generación de informes de calidad, manteniendo

Responsabilidades

• Diseñar, desarrollar y mantener frameworks de automatización de pruebas para aplicaciones web, APIs y soluciones basadas en Inteligencia Artificial.
• Implementar pruebas automatizadas funcionales, de integración, regresión y End-to-End.
• Validar aplicaciones de IA Generativa, chatbots, copilots, asistentes virtuales y soluciones basadas en LLMs.
• Evaluar la precisión, consistencia, relevancia y confiabilidad de modelos de Inteligencia Artificial.
• Diseñar estrategias para detección de alucinaciones, sesgos e inconsistencias en respuestas generadas por IA.
• Ejecutar pruebas sobre arquitecturas RAG (Retrieval-Augmented Generation).
• Automatizar pruebas de APIs utilizando herramientas especializadas.
• Implementar pruebas continuas dentro de pipelines CI/CD.
• Colaborar con equipos de Desarrollo, Data Science, Machine Learning e Inteligencia Artificial.
• Definir métricas de calidad para aplicaciones basadas en IA.
• Analizar resultados de pruebas y generar reportes de calidad.
• Participar en revisiones de prompts, evaluaciones de modelos y procesos de Prompt Engineering.
• Validar soluciones implementadas en Azure OpenAI, Azure AI Foundry y plataformas cloud.
• Identificar riesgos funcionales y de calidad antes de la liberación de productos.
• Impulsar mejores prácticas de QA, automatización y AI Testing dentro de la organización.
• Experiencia en observabilidad y monitoreo de aplicaciones de IA.
• Pensamiento analítico.
• Atención al detalle.
• Resolución de problemas complejos.
• Comunicación efectiva con equipos técnicos y de negocio.
• Capacidad para investigar comportamientos no determinísticos en sistemas de IA.
• Trabajo colaborativo en equipos multidisciplinarios.

Descripción del empleo

Industria – Sector: Inteligencia Artificial / Tecnología / Software Development / QA Automation

Tus funciones:

• Diseñar, desarrollar y mantener frameworks de automatización de pruebas para aplicaciones web, APIs y soluciones basadas en Inteligencia Artificial.
• Implementar pruebas automatizadas funcionales, de integración, regresión y End-to-End.
• Validar aplicaciones de IA Generativa, chatbots, copilots, asistentes virtuales y soluciones basadas en LLMs.
• Evaluar la precisión, consistencia, relevancia y confiabilidad de modelos de Inteligencia Artificial.
• Diseñar estrategias para detección de alucinaciones, sesgos e inconsistencias en respuestas generadas por IA.
• Ejecutar pruebas sobre arquitecturas RAG (Retrieval-Augmented Generation).
• Automatizar pruebas de APIs utilizando herramientas especializadas.
• Implementar pruebas continuas dentro de pipelines CI/CD.
• Colaborar con equipos de Desarrollo, Data Science, Machine Learning e Inteligencia Artificial.
• Definir métricas de calidad para aplicaciones basadas en IA.
• Analizar resultados de pruebas y generar reportes de calidad.
• Participar en revisiones de prompts, evaluaciones de modelos y procesos de Prompt Engineering.
• Validar soluciones implementadas en Azure OpenAI, Azure AI Foundry y plataformas cloud.
• Identificar riesgos funcionales y de calidad antes de la liberación de productos.
• Impulsar mejores prácticas de QA, automatización y AI Testing dentro de la organización.
• Experiencia en observabilidad y monitoreo de aplicaciones de IA.
• Pensamiento analítico.
• Atención al detalle.
• Resolución de problemas complejos.
• Comunicación efectiva con equipos técnicos y de negocio.
• Capacidad para investigar comportamientos no determinísticos en sistemas de IA.
• Trabajo colaborativo en equipos multidisciplinarios.

Tu carrera en Capgemini

• Al trabajar en un ambiente de equipo, nuestros consultores se enfocan en el análisis, diseño y desarrollo de soluciones basadas en tecnología para los clientes de Capgemini.
• Trabajarás en conjunto con especialistas funcionales, técnicos y del negocio para ayudar a desarrollar la implementación e integración de soluciones y sistemas innovadores incluyendo metodologías, técnicas y herramientas.
• Contribuirás de una manera responsable y oportuna con la satisfacción del cliente proporcionando servicios y productos que generan valor agregado.
• Capgemini ofrece una compensación competitiva y beneficios superiores a los de Ley.
• Nuestras oficinas centrales están en París, Francia y tenemos presencia en más de 50 países. Somos más de 340 mil profesionales en México, ubicados en Ciudad de México, Aguascalientes y Monterrey.
• Capgemini ha desarrollado metodologías propias a nivel global: Collaborative Business Experience y Rightshore.

Te encantará trabajar en Capgemini porque:

• Ofrecemos una experiencia única de reclutamiento y onboarding, y te ayudamos a construir las bases de tu carrera y habilidades profesionales.
• Proveemos un ambiente de trabajo colaborativo basado en nuestros 7 valores: Honestidad, Audacia, Confianza, Libertad, Espíritu de Equipo, Modestia y Diversión.
• Promovemos un ambiente que te permite planear y desarrollar tu carrera.

“En Capgemini México, el objetivo es atraer al mejor talento y lograr un ambiente laboral diverso e inclusivo por lo que no se discrimina por motivo de raza, sexo, orientación sexual, identidad o expresión de género o cualquier otra característica propia de la persona. Todas las solicitudes son bienvenidas y serán consideradas para concurso con base en el mérito del candidato contra el trabajo y/o la experiencia para el puesto. Por motivos de validación, usaremos de manera segura tus datos incluyendo pero no limitado a tu imagen en video o screenshots durante los procesos de selección, contratación y/o On boarding , para tu seguridad, puedes revisar nuestro aviso de privacidad en: https://www.capgemini.com/mx-es/aviso-de-privacidad-para-candidatos-a-ocupar-una-vacante/