QA Engineer IA

NTT DATA, Inc.; Colombia; On-site; COP 189,843,000 - 284,765,000; Full time

Benefits offered by this job

Desarrollo profesional continuo y form

Cultura de trabajo colaborativa

Remuneración competitiva y beneficios

Job summary

NTT DATA Europe & Latam busca un Ingeniero de sistemas o afines con al menos 3 años de experiencia en soluciones de Inteligencia Artificial, capaz de diseñar y automatizar pruebas para agentes y asistentes basados en LLM y arquitecturas RAG.

Serás responsable de construir datasets, definir rúbricas de evaluación y diseñar pruebas de sesgo, fiabilidad y robustez, y validar la interacción del agente con APIs y herramientas externas; se valora experiencia en automatización, APIs, CI/CD y prompts.

Qualifications

• Experiencia a partir de 3 años en soluciones de Inteligencia Artificial.
• Capacidad para diseñar y automatizar pruebas para agentes basados en LLM y arquitecturas RAG.
• Conocimiento práctico de LLMs, prompts, embeddings, RAG y API interactions.

Responsibilities

• Construir datasets y definir rúbricas de evaluación.
• Diseñar pruebas de sesgo, fiabilidad, cobertura y robustez.
• Validar la interacción del agente con APIs, MCPs, Skills y herramientas externas.

Skills

Pruebas automatizadas

Diseño de pruebas

IA testing

Pruebas de LLM

Education

Ingeniero de sistemas o afines

Tools

APIs

CI/CD

Function Calling

Agent IDEs

Job description

¡Únete a nuestro equipo en NTT DATA Europe & Latam!

Sobre nosotros:

Somos una consultora multinacional recientemente certificada como TOP EMPLOYER destacándonos como una de las mejores compañías para trabajar en Latinoamérica y Colombia. Actualmente, ocupamos el sexto lugar en el sector IT, ofreciendo soluciones de negocio, estrategia, transformación digital, desarrollo y mantenimiento de aplicaciones tecnológicas.

Rol que buscamos:

Ingeniero de sistemas o afines, con experiencia a partir de 3 años en soluciones de Inteligencia Artificial, capaz de diseñar y automatizar pruebas para agentes, asistentes basados en LLM y arquitecturas RAG.

Será responsable de construir datasets, definir rúbricas de evaluación, diseñar pruebas de sesgo, fiabilidad, cobertura, dominio, variación, robustez y alucinaciones, y validar la interacción del agente con APIs, MCPs, Skills y herramientas externas. Debe contar con experiencia en automatización, APIs, programación y CI/CD, así como conocimiento práctico de LLMs, prompts, embeddings, RAG, Function Calling e IDEs agenticos.

Oportunidad de formar parte de una empresa líder en el sector tecnológico.

• Desarrollo profesional continuo y acceso a programas de formación de vanguardia.
• Cultura de trabajo colaborativa.
• Remuneración competitiva y beneficios sociales atractivos.