QA Automatizador- IA

Accenture; Medellín; Presencial; COP 60.000.000 - 100.000.000; Jornada completa

Descripción de la vacante

Accenture Medellín busca un QA Automatizador para soluciones de Inteligencia Artificial. La persona seleccionada diseñará y mantendrá frameworks de pruebas automáticas, ejecutará pruebas de IA y validará modelos de lenguaje, trabajando con YAML/JSON y pipelines CI/CD en Azure DevOps.

Se valorará experiencia en validación de agentes de IA, manejo de métricas de calidad y habilidades analíticas para identificar defectos y riesgos, colaborando estrechamente con equipos multidisciplinarios.

Formación

• Más de 1 año de experiencia en pruebas de soluciones de IA.
• Experiencia en automatización de pruebas y aseguramiento de calidad de aplicaciones.
• Conocimientos en validación y pruebas de agentes de IA.
• Experiencia trabajando con Azure DevOps y procesos CI/CD.
• Conocimientos en evaluación de LLMs, incluyendo hallucination y groundedness.
• Experiencia en diseño y ejecución de escenarios de prueba utilizando YAML y JSON.
• Capacidad analítica para identificar defectos, evaluar riesgos y garantizar la calidad de las soluciones.
• Habilidades de trabajo colaborativo y comunicación efectiva con equipos multidisciplinarios.

Responsabilidades

• Diseñar, desarrollar y mantener frameworks de automatización de pruebas para soluciones basadas en Inteligencia Artificial.
• Ejecutar pruebas funcionales, de integración y validación de agentes de IA.
• Definir y gestionar escenarios de prueba utilizando formatos YAML y JSON.
• Evaluar el desempeño de modelos de lenguaje (LLMs), incluyendo métricas de hallucination, groundedness, relevancia y calidad de respuesta.
• Integrar procesos de pruebas automatizadas dentro de pipelines de Azure DevOps y entornos CI/CD.
• Colaborar con equipos de desarrollo, datos e ingeniería de IA para garantizar la calidad de las soluciones implementadas.
• Analizar resultados, documentar hallazgos y proponer mejoras continuas en los procesos de testing.

Conocimientos

Automated testing

QA testing

Azure DevOps

CI/CD

LLM evaluation

YAML/JSON testing

Colaboración

Herramientas

Azure DevOps

Descripción del empleo

Accenture es una compañía global líder en servicios profesionales, con soluciones en estrategia y consultoría, tecnología, operaciones y capacidades digitales que impulsan a nuestros clientes a alcanzar su máximo potencial.

En nuestro equipo de #Tecnología, acompañamos a organizaciones de distintas industrias en la adopción de soluciones innovadoras basadas en Inteligencia Artificial, automatización y plataformas digitales de última generación.

Actualmente nos encontramos en la búsqueda de un QA Automatizador para Soluciones de Inteligencia Artificial.

La persona seleccionada será responsable de asegurar la calidad y confiabilidad de aplicaciones y agentes de IA mediante la automatización de pruebas, la definición de escenarios de validación y la evaluación continua de modelos de lenguaje (LLMs), contribuyendo a entregar soluciones robustas, escalables y alineadas con los estándares de calidad establecidos.

Responsabilidades del rol:

• Diseñar, desarrollar y mantener frameworks de automatización de pruebas para soluciones basadas en Inteligencia Artificial.
• Ejecutar pruebas funcionales, de integración y validación de agentes de IA.
• Definir y gestionar escenarios de prueba utilizando formatos YAML y JSON.
• Evaluar el desempeño de modelos de lenguaje (LLMs), incluyendo métricas de hallucination, groundedness, relevancia y calidad de respuesta.
• Integrar procesos de pruebas automatizadas dentro de pipelines de Azure DevOps y entornos CI/CD.
• Colaborar con equipos de desarrollo, datos e ingeniería de IA para garantizar la calidad de las soluciones implementadas.
• Analizar resultados, documentar hallazgos y proponer mejoras continuas en los procesos de testing.

Requerimientos del puesto:

• Más de 1 año de experiencia en pruebas de soluciones de Inteligencia Artificial o entornos relacionados.
• Experiencia en automatización de pruebas y aseguramiento de calidad de aplicaciones.
• Conocimiento y experiencia en validación y pruebas de agentes de IA.
• Experiencia trabajando con Azure DevOps y procesos CI/CD.
• Conocimientos en evaluación de LLMs, incluyendo conceptos como hallucination y groundedness.
• Experiencia en diseño y ejecución de escenarios de prueba utilizando YAML y JSON.
• Capacidad analítica para identificar defectos, evaluar riesgos y garantizar la calidad de las soluciones.
• Habilidades de trabajo colaborativo y comunicación efectiva con equipos multidisciplinarios.

Buscamos profesionales apasionados por la innovación, la calidad de software y la Inteligencia Artificial, con una mentalidad analítica, orientación al detalle y motivación por impulsar soluciones tecnológicas de alto impacto.

Todas las decisiones de Accenture se tomarán sin discriminar por motivos de raza, religión, color, sexo, edad, discapacidad, nacionalidad, orientación sexual, identidad o expresión de género, ni por ninguna otra razón cubierta por la legislación local.

About Accenture

Accenture is a leading global professional services company that helps the world’s leading businesses, governments and other organizations build their digital core, optimize their operations, accelerate revenue growth and enhance citizen services creating tangible value at speed and scale. We are a talent- and innovation-led company with approximately 791,000 people serving clients in more than 120 countries. Technology is at the core of change today, and we are one of the world’s leaders in helping drive that change, with strong ecosystem relationships. We combine our strength in technology and leadership in cloud, data and AI with unmatched industry experience, functional expertise and global delivery capability. Our broad range of services, solutions and assets across Strategy & Consulting, Technology, Operations, Industry X and Song, together with our culture of shared success and commitment to creating 360° value, enable us to help our clients reinvent and build trusted, lasting relationships. We measure our success by the 360° value we create for our clients, each other, our shareholders, partners and communities.

Visit us at www.accenture.com

Declaración de igualdad de oportunidades en el empleo

Creemos que nadie debe ser discriminado por sus diferencias. Todas las decisiones de empleo se tomarán sin importar la edad, raza, credo, color, religión, sexo, origen nacional, ascendencia, discapacidad, condición de veterano militar, orientación sexual, identidad o expresión de género, información genética, estado civil, ciudadanía ni ningún otro criterio protegido por la legislación aplicable. Nuestra rica diversidad nos hace más innovadores, competitivos y creativos, lo que nos permite servir mejor a nuestros clientes y comunidades.