Engenheiro(a) de Dados

SysManager; Brasil; Presencial; BRL 180 000 - 260 000; Tempo integral

Vantagens oferecidas por esta oferta de emprego

Vale alimentação

Assistência médica

Seguro de vida

Resumo da oferta

Sys Manager está com vaga aberta para Engenheiro(a) de Dados Sênior, remoto no Brasil. O(a) profissional atuará no desenvolvimento de pipelines de ingestão, transformação e disponibilização de dados, utilizando arquitetura Lakehouse com Databricks e Databricks Apps.

Será responsável por pipelines de IA, integração com Azure OpenAI e otimização de custos na nuvem. A vaga requer formação superior em ciência da computação ou áreas afins, experiência com Spark/PySpark, Python, SQL e certificações

Qualificações

• Formação superior em áreas correlatas.
• Experiência comprovada como Engenheiro de Dados.
• Domínio de Python e SQL avançados.
• Conhecimento em Azure Databricks e Databricks Apps.
• Conhecimento de pipelines batch/streaming com Spark/PySpark.
• Experiência com IA Generativa e integração com LLMs.

Responsabilidades

• Desenvolver e evoluir pipelines de ingestão, transformação e disponibilização de dados.
• Construir soluções de dados com arquitetura Lakehouse usando Databricks.
• Desenvolver Databricks Apps para aplicações corporativas.
• Implementar pipelines para modelos de IA e IA Generativa.
• Integrar dados com Azure OpenAI, AI Foundry e AI Search.
• Garantir escalabilidade, desempenho e segurança das soluções.

Conhecimentos

Python

SQL

Azure Databricks

Databricks Apps

APIs REST

Formação académica

Bacharel em Ciência da Computação

Engenharia de Software

Ferramentas

Docker

AKS

Azure Data Factory

Azure Data Lake Storage

Power BI

Git

Descrição da oferta de emprego

VAGA ABERTA: Engenheiro(a) de Dados Sênior – Remoto

Em busca de uma carreira em uma empresa que valoriza a flexibilidade, desenvolvimento pessoal e sucesso da equipe? Com 30 anos de experiência e reconhecidos pelo GPTW pelo sexto ano consecutivo, estamos em busca de talentos para se juntarem a nós como Engenheiro(a) de Dados. Com matriz no Brasil e filiais em território internacional, oferecemos oportunidades para crescimento e desenvolvimento.

Requisitos essenciais:

• Ensino Superior completo em Ciência da Computação, Sistemas de Informação, Engenharia da Computação, Engenharia de Software ou áreas correlatas;
• Experiência como Engenheiro de Dados;
• Experiência comprovada com Azure Databricks e desenvolvimento de aplicações utilizando Databricks Apps;
• Experiência na construção, implementação e sustentação de arquitetura Lakehouse com Delta Lake e Unity Catalog;
• Experiência na implementação de pipelines de dados batch e streaming utilizando Apache Spark e PySpark;
• Experiência em projetos de Inteligência Artificial e IA Generativa;
• Domínio de Python e SQL avançados;
• Conhecimento em Azure Data Factory e Azure Data Lake Storage (ADLS);
• Conhecimento em Microsoft Fabric;
• Experiência com Azure AI Foundry, Azure OpenAI Service e Azure AI Search;
• Experiência na integração de APIs REST;
• Conhecimento em Git, versionamento de código, DevOps e automação de deploy;
• Conhecimento em modelagem de dados analítica;
• Conhecimento em DataOps, MLOps, segurança, governança e qualidade de dados;
• Conhecimento em arquiteturas RAG (Retrieval-Augmented Generation) e integração com Large Language Models (LLMs);

Requisitos adicionais:

• Certificação Databricks Certified Data Engineer Associate ou Professional;
• Certificação Microsoft Azure Data Engineer Associate (DP-203);
• Certificação Microsoft Azure AI Engineer Associate (AI-102);
• Certificação Fabric Analytics Engineer Associate (DP-600);
• Conhecimento em Microsoft Copilot Studio, Power Platform e Power BI;
• Conhecimento em Azure Functions e Azure Kubernetes Service (AKS);
• Conhecimento em containers e orquestração utilizando Docker e Kubernetes;
• Conhecimento em mensageria e processamento de eventos utilizando Event Hub e Service Bus;
• Conhecimento em LangChain, Semantic Kernel, GraphRAG e Knowledge Graphs;
• Conhecimento em Machine Learning e Engenharia de Prompt;
• Conhecimento em arquiteturas multiagentes;
• Conhecimento em observabilidade aplicada a soluções de Inteligência Artificial;
• Conhecimento em FinOps aplicado a ambientes de IA e Analytics;
• Participação em projetos corporativos de IA Generativa em escala;
• Experiência na construção de agentes inteligentes e plataformas agênticas;
• Experiência com processamento de grandes volumes de dados (Big Data);
• Vivência em ambientes corporativos de grande porte dos setores de mineração, indústria, energia ou telecomunicações;
• Vivência com ferramentas de inteligência artificial, como ChatGPT, GitHub Copilot e plataformas de automação ou geração de conteúdo, aplicadas à automação de tarefas, criação de relatórios, análise de dados, apoio à tomada de decisão, inovação contínua e melhoria da eficiência operacional e da qualidade das entregas;

Responsabilidades:

• Desenvolver e evoluir pipelines de ingestão, transformação e disponibilização de dados;
• Construir soluções de dados utilizando arquitetura Lakehouse baseada em Databricks;
• Desenvolver aplicações corporativas utilizando Databricks Apps;
• Implementar pipelines para consumo de modelos de Inteligência Artificial e IA Generativa;
• Integrar soluções de dados com Azure OpenAI, Azure AI Foundry e Azure AI Search;
• Desenvolver serviços de indexação, busca semântica e mecanismos de recuperação de contexto para arquiteturas RAG;
• Garantir escalabilidade, desempenho, observabilidade e segurança das soluções implementadas;
• Implementar boas práticas de DataOps, DevOps e MLOps;
• Monitorar e otimizar custos de processamento e armazenamento em ambientes cloud;
• Apoiar arquitetos e equipes de desenvolvimento na definição de padrões de engenharia de dados;
• Participar da modelagem de dados, governança e definição de estratégias de integração;
• Produzir documentação técnica e apoiar processos de sustentação e evolução contínua das plataformas;
• Contribuir para iniciativas de agentes inteligentes, copilotos corporativos e automação baseada em Inteligência Artificial;

Nossos cuidados com você:

*Benefícios a variar de acordo com a modalidade de contrato

• Vale Alimentação ou Vale Refeição Ifood Empresas;
• Benefício indireto (valor fixo para custeio parcial do plano de saúde ou somado ao vale alimentação);
• Desconto em cursos, universidades e instituições de idiomas;
• Academia Sys Manager - plataforma com cursos online, gratuitos, atualizados e com certificado;
• Auxílio Creche;
• Assistência Médica;
• Assistência Odontológica;
• Teladoc Health - Parceria para atendimentos médicos;
• Convênio para Pet;
• Seguro de vida e outros.