QA Automatizador- IA

1700 Accenture Ltda Company; Medellín; Presencial; COP 40.000.000 - 70.000.000; Jornada completa

Descripción de la vacante

Accenture busca un QA Automatizador para Soluciones de Inteligencia Artificial en Medellín. La función se centra en garantizar la calidad de aplicaciones y agentes de IA mediante automatización de pruebas y validación de escenarios en YAML/JSON.

Únete a un equipo de tecnología que integra IA, automatización y plataformas digitales, trabajando con Azure DevOps y pipelines CI/CD para entregar soluciones robustas y escalables.

Formación

• Más de 1 año de experiencia en pruebas de soluciones de Inteligencia Artificial o entornos relacionados.
• Experiencia en automatización de pruebas y aseguramiento de calidad de aplicaciones.
• Conocimientos en evaluación de LLMs, incluyendo hallucination y groundedness.
• Experiencia trabajando con Azure DevOps y procesos CI/CD.

Responsabilidades

• Diseñar, desarrollar y mantener frameworks de automatización de pruebas para soluciones basadas en Inteligencia Artificial.
• Ejecutar pruebas funcionales, de integración y validación de agentes de IA.
• Definir y gestionar escenarios de prueba utilizando YAML y JSON.
• Evaluar el desempeño de modelos de lenguaje (LLMs), incluyendo métricas de hallucination, groundedness, relevancia y calidad de respuesta.
• Integrar procesos de pruebas automatizadas dentro de pipelines de Azure DevOps y entornos CI/CD.
• Colaborar con equipos de desarrollo, datos e ingeniería de IA para garantizar la calidad de las soluciones implementadas.
• Analizar resultados, documentar hallazgos y proponer mejoras continuas en los procesos de testing.

Conocimientos

Automatización de pruebas

QA/QC de software

Validación de IA / pruebas de IA

Azure DevOps

CI/CD

Colaboración interdisciplinaria

Herramientas

Azure DevOps

CI/CD pipelines

Descripción del empleo

Accenture es una compañía global líder en servicios profesionales, con soluciones en estrategia y consultoría, tecnología, operaciones y capacidades digitales que impulsan a nuestros clientes a alcanzar su máximo potencial. En nuestro equipo de #Tecnología, acompañamos a organizaciones de distintas industrias en la adopción de soluciones innovadoras basadas en Inteligencia Artificial, automatización y plataformas digitales de última generación. Actualmente nos encontramos en la búsqueda de un QA Automatizador para Soluciones de Inteligencia Artificial. La persona seleccionada será responsable de asegurar la calidad y confiabilidad de aplicaciones y agentes de IA mediante la automatización de pruebas, la definición de escenarios de validación y la evaluación continua de modelos de lenguaje (LLMs), contribuyendo a entregar soluciones robustas, escalables y alineadas con los estándares de calidad establecidos.

Responsabilidades del rol:

• Diseñar, desarrollar y mantener frameworks de automatización de pruebas para soluciones basadas en Inteligencia Artificial.
• Ejecutar pruebas funcionales, de integración y validación de agentes de IA.
• Definir y gestionar escenarios de prueba utilizando formatos YAML y JSON.
• Evaluar el desempeño de modelos de lenguaje (LLMs), incluyendo métricas de hallucination, groundedness, relevancia y calidad de respuesta.
• Integrar procesos de pruebas automatizadas dentro de pipelines de Azure DevOps y entornos CI/CD.
• Colaborar con equipos de desarrollo, datos e ingeniería de IA para garantizar la calidad de las soluciones implementadas.
• Analizar resultados, documentar hallazgos y proponer mejoras continuas en los procesos de testing.

Requerimientos del puesto:

• Más de 1 año de experiencia en pruebas de soluciones de Inteligencia Artificial o entornos relacionados.
• Experiencia en automatización de pruebas y aseguramiento de calidad de aplicaciones.
• Conocimiento y experiencia en validación y pruebas de agentes de IA.
• Experiencia trabajando con Azure DevOps y procesos CI/CD.
• Conocimientos en evaluación de LLMs, incluyendo conceptos como hallucination y groundedness.
• Experiencia en diseño y ejecución de escenarios de prueba utilizando YAML y JSON.
• Capacidad analítica para identificar defectos, evaluar riesgos y garantizar la calidad de las soluciones.
• Habilidades de trabajo colaborativo y comunicación efectiva con equipos multidisciplinarios.

Buscamos profesionales apasionados por la innovación, la calidad de software y la Inteligencia Artificial, con una mentalidad analítica, orientación al detalle y motivación por impulsar soluciones tecnológicas de alto impacto.

Todas las decisiones de Accenture se tomarán sin discriminar por motivos de raza, religión, color, sexo, edad, discapacidad, nacionalidad, orientación sexual, identidad o expresión de género, ni por ninguna otra razón cubierta por la legislación local.

About Accenture Accenture is a leading global professional services company that helps the world’s leading businesses, governments and other organizations build their digital core, optimize their operations, accelerate revenue growth and enhance citizen services—creating tangible value at speed and scale. We are a talent- and innovation-led company with approximately 791,000 people serving clients in more than 120 countries. Technology is at the core of change today, and we are one of the world’s leaders in helping drive that change, with strong ecosystem relationships. We combine our strength in technology and leadership in cloud, data and AI with unmatched industry experience, functional expertise, and global delivery capability. Our broad range of services, solutions and assets across Strategy & Consulting, Technology, Operations, Industry X and Song, together with our culture of shared success and commitment to creating 360° value, enable us to help our clients reinvent and build trusted, lasting relationships. We measure our success by the 360° value we create for our clients, each other, our shareholders, partners and communities. Visit us at www.accenture.com Declaración de igualdad de oportunidades en el empleo Creemos que nadie debe ser discriminado por sus diferencias. Todas las decisiones de empleo se tomarán sin importar la edad, raza, credo, color, religión, sexo, origen nacional, ascendencia, discapacidad, condición de veterano militar, orientación sexual, identidad o expresión de género, información genética, estado civil, ciudadanía ni ningún otro criterio protegido por la legislación aplicable. Nuestra rica diversidad nos hace más innovadores, competitivos y creativos, lo que nos permite servir mejor a nuestros clientes y comunidades. Bring your incredible skills and join our global team of innovators. We come together from different backgrounds across the world and work with the latest technologies to create value and growth for our clients. With us, you’ll continue to learn and grow so you can advance in your career. Your personal dreams and ambitions are just as important to us; that’s why we offer support any way we can—when you thrive, we all thrive. Explore your next step at Accenture Belong. Grow. Thrive. Join a great place to work for reinventors who drive meaningful change for our clients, communities, and the world. Wo rld. Explore your next step at Accenture