Ingeniero QA IA — Pruebas LLM, RAG y APIs

NTT DATA, Inc.; Colombia; On-site; COP 189,843,000 - 284,765,000; Full time

Benefits offered by this job

Desarrollo profesional continuo y form

Cultura de trabajo colaborativa

Remuneración competitiva y beneficios

Job summary

NTT DATA Europe & Latam busca un Ingeniero de sistemas o afines con al menos 3 años de experiencia en soluciones de Inteligencia Artificial, capaz de diseñar y automatizar pruebas para agentes y asistentes basados en LLM y arquitecturas RAG.

Serás responsable de construir datasets, definir rúbricas de evaluación y diseñar pruebas de sesgo, fiabilidad y robustez, y validar la interacción del agente con APIs y herramientas externas; se valora experiencia en automatización, APIs, CI/CD y prompts.

Qualifications

• Experiencia a partir de 3 años en soluciones de Inteligencia Artificial.
• Capacidad para diseñar y automatizar pruebas para agentes basados en LLM y arquitecturas RAG.
• Conocimiento práctico de LLMs, prompts, embeddings, RAG y API interactions.

Responsibilities

• Construir datasets y definir rúbricas de evaluación.
• Diseñar pruebas de sesgo, fiabilidad, cobertura y robustez.
• Validar la interacción del agente con APIs, MCPs, Skills y herramientas externas.

Skills

Pruebas automatizadas

Diseño de pruebas

IA testing

Pruebas de LLM

Education

Ingeniero de sistemas o afines

Tools

APIs

CI/CD

Function Calling

Agent IDEs

Job description

NTT DATA Europe & Latam busca un Ingeniero de sistemas o afines con al menos 3 años de experiencia en soluciones de Inteligencia Artificial, capaz de diseñar y automatizar pruebas para agentes y asistentes basados en LLM y arquitecturas RAG.

Serás responsable de construir datasets, definir rúbricas de evaluación y diseñar pruebas de sesgo, fiabilidad y robustez, y validar la interacción del agente con APIs y herramientas externas; se valora experiencia en automatización, APIs, CI/CD y prompts.