O que buscamos Buscamos um(a) profissional sênior de Qualidade de Software (QA) com experiência em testes de aplicações tradicionais e soluções de Inteligência Artificial Generativa. O perfil atuará na definição de estratégias de testes, automação, validação de modelos baseados em LLMs, pipelines RAG e plataformas financeiras, garantindo qualidade, confiabilidade, segurança e performance das soluções.
Responsabilidades
- Atuar com o planejamento e execução de estratégias de testes funcionais, integrados, regressivos e de performance
- Projetar e executar testes de aplicações baseadas em Inteligência Artificial e modelos de linguagem (LLMs)
- Avaliar a qualidade de respostas geradas por IA considerando critérios de precisão, coerência, tom, segurança e viés
- Desenvolver e manter frameworks e suítes de testes automatizados
- Validar soluções integradas a pipelines RAG, bases de conhecimento e bancos vetoriais
- Executar testes de APIs, serviços backend e integrações entre sistemas
- Identificar riscos, falhas e cenários de borda relacionados ao comportamento dos modelos de IA
- Atuar com validações de integridade, reconciliação e qualidade de dados
- Coordenar testes de regressão relacionados a releases, correções e mudanças de infraestrutura
- Colaborar com equipes de desenvolvimento, produto e análise de negócios para garantir a testabilidade das soluções
- Conduzir análises e priorização de defeitos com base no impacto para o negócio
- Monitorar indicadores de qualidade, cobertura de testes e automação
- Elaborar relatórios executivos e recomendações de melhoria contínua
- Apoiar investigações de incidentes em produção e análises de causa raiz
- Mentorar profissionais da equipe e promover boas práticas de qualidade de software
Requisitos e Qualificações
- Experiência sólida em Qualidade de Software (QA) ou Quality Engineering
- Experiência em posições sêniores ou de liderança técnica em QA
- Inglês avançado ou fluente para comunicação diária
- Conhecimento de estratégias de testes funcionais, integração, regressão e performance
- Experiência com automação de testes utilizando Selenium, Playwright, Robot Framework ou ferramentas similares
- Conhecimento em desenvolvimento utilizando Java e Python
- Experiência com automação e validação de APIs
- Conhecimento em consultas a bancos de dados, validação e reconciliação de dados
- Experiência com pipelines CI/CD e ferramentas como Jenkins, GitHub ou similares
- Conhecimento da arquitetura e comportamento de Large Language Models (LLMs)
- Experiência com Prompt Engineering e avaliação de respostas geradas por IA
- Conhecimento em LangChain e/ou LangGraph
- Experiência com pipelines RAG (Retrieval-Augmented Generation)
- Conhecimento em bancos de dados vetoriais e buscas por similaridade
- Conhecimento em protocolos de integração e testes de ferramentas conectadas via MCP
- Conhecimento de metodologias de testes de segurança, viés e validação de sistemas de IA
Diferenciais
- Experiência no segmento de securitização, mercado de capitais ou ativos financeiros
- Vivência com testes em plataformas financeiras complexas
- Conhecimento avançado em embeddings, tokenização, mecanismos de atenção e inferência de LLMs
- Experiência com testes de soluções agentic (AI Agents)
- Conhecimento em monitoramento da qualidade de modelos de IA em escala
- Vivência com liderança técnica e desenvolvimento de times de QA
- Experiência com ferramentas de IA e Machine Learning aplicadas à automação de testes.