LLMs Data Analyst | Senior (Hybrid/SP)

AI/R; Agudos; Presencial; BRL 180 000 - 240 000; Tempo integral

Resumo da oferta

AI/R busca profissional para evoluir soluções de IA Generativa em casos de negócio, com integração de LiteLLM para orquestração de múltiplos provedores de LLM.

O candidato terá responsabilidade em definir estratégias de roteamento, observabilidade e governança de modelos, além de construir pipelines de dados, monitorar desempenho e atuar com LLMOps/MLOps para garantir escalabilidade e eficiência.

Qualificações

• Experiência sólida como Analista de Dados Sênior, Data Scientist ou ML Engineer.
• Conhecimento prático em IA Generativa e integrações com LiteLLM.
• Domínio de Python aplicado a dados e IA; APIs REST para serviços IA.
• Experiência com múltiplos provedores de LLM e ferramentas de nuvem.
• Conhecimento de observabilidade, monitoramento e avaliação de apps IA.

Responsabilidades

• Desenvolver e evoluir soluções de IA Generativa para diversos negócios.
• Projetar integrações com LiteLLM para orquestração de provedores LLM.
• Definir rotas, fallback, observabilidade e governança de modelos.
• Construir pipelines de dados para treinamento, avaliação e monitoramento.
• Praticar LLMOps e MLOps garantindo escalabilidade e eficiência.
• Construir dashboards e métricas para performance de IA.

Conhecimentos

Data Scientist

ML Engineer

Python para IA

APIs REST

SQL em Big Data

CI/CD

Git

Monitoramento

Ferramentas

LiteLLM

OpenAI

Azure OpenAI

AWS

GCP

Descrição da oferta de emprego

• Desenvolver e evoluir soluções de IA Generativa para diferentes casos de negócio;
• Projetar e implementar integrações com LiteLLM para orquestração de múltiplos provedores de LLM;
• Definir estratégias de roteamento, fallback, observabilidade e governança de modelos;
• Construir pipelines de dados para treinamento, avaliação e monitoramento de aplicações de IA;
• Implementar práticas de LLMOps e MLOps, garantindo escalabilidade, confiabilidade e eficiência operacional;
• Estruturar métricas, dashboards e indicadores para acompanhamento da performance dos produtos de IA;
• Analisar utilização, qualidade das respostas, custos de inferência e eficiência dos modelos;
• Identificar oportunidades de otimização de custos, considerando prompts, seleção de modelos, cache e estratégias de roteamento;
• Apoiar times multidisciplinares na definição e adoção de boas práticas de arquitetura para soluções GenAI;
• Atuar na evolução contínua da observabilidade, qualidade e performance das aplicações baseadas em LLMs.

Descrição da vaga

Responsabilidades e atribuições

• Desenvolver e evoluir soluções de IA Generativa para diferentes casos de negócio;
• Projetar e implementar integrações com LiteLLM para orquestração de múltiplos provedores de LLM;
• Definir estratégias de roteamento, fallback, observabilidade e governança de modelos;
• Construir pipelines de dados para treinamento, avaliação e monitoramento de aplicações de IA;
• Implementar práticas de LLMOps e MLOps, garantindo escalabilidade, confiabilidade e eficiência operacional;
• Estruturar métricas, dashboards e indicadores para acompanhamento da performance dos produtos de IA;
• Analisar utilização, qualidade das respostas, custos de inferência e eficiência dos modelos;
• Identificar oportunidades de otimização de custos, considerando prompts, seleção de modelos, cache e estratégias de roteamento;
• Apoiar times multidisciplinares na definição e adoção de boas práticas de arquitetura para soluções GenAI;
• Atuar na evolução contínua da observabilidade, qualidade e performance das aplicações baseadas em LLMs.

Requisitos e qualificações

• Experiência sólida como Analista de Dados Sênior, Data Scientist, ML Engineer ou em funções correlatas;
• Experiência prática em projetos de IA Generativa em ambiente corporativo;
• Conhecimento avançado em LiteLLM;
• Experiência com múltiplos provedores de LLM, como OpenAI, Azure OpenAI, Anthropic, Gemini ou similares;
• Experiência com LLMOps e MLOps;
• Domínio de Python aplicado a dados e soluções de IA;
• Experiência com APIs REST e integração de serviços de IA;
• Conhecimento em observabilidade, monitoramento e avaliação de aplicações baseadas em LLMs;
• Experiência com AWS, Azure ou Google Cloud Platform;
• Domínio de SQL e experiência com grandes volumes de dados;
• Experiência na construção de dashboards, métricas e análises para produtos digitais;
• Conhecimento de Git, CI/CD e versionamento de modelos e artefatos.

Become a Compasser, be part of AI/R.

Compass UOL is a global firm and part of the AI Revolution Company, together transforming organizations using Artificial Intelligence, Generative AI, and other of today’s most advanced technologies.

We equip our team with proprietary and external AI-driven tools to design and build digital-native platforms, integrating cutting-edge technologies and enabling companies to innovate, transform their businesses, and drive success in their markets.

To achieve this, we attract and develop the best talent, creating opportunities that enhance people’s lives and highlight the positive impact of disruptive technologies.

We empower borderless talent and promote knowledge and opportunities in the latest market trends, driving significant personal and professional growth.

Join us and be part of the AI-driven revolution.