Data Engineer Manager | Azure Databricks

Avanade Inc.; São Paulo; Presencial; BRL 180 000 - 260 000; Tempo integral

Vantagens oferecidas por esta oferta de emprego

Vale refeição/Alimentação

Convênio médico e odontológico

Certificações e treinamentos

Seguro de Vida

Previdência Privada

Mentoria de carreira

Resumo da oferta

A Avanade Inc. busca um Data Engineer Manager para liderar iniciativas de modernização e migração de dados, visando transformar grandes organizações com Azure e Databricks.

O papel combina atuação técnica e hands-on, desenvolvendo pipelines, migrando ativos de dados e assegurando qualidade, governança e padrões de engenharia. Trabalho em equipe multidisciplinar em ambiente ágil.

Qualificações

• Experiência em Engenharia de Dados e pipelines analíticos.
• Conhecimento em Azure Databricks e Apache Spark.
• Domínio de Python e SQL; APIs e integração com sistemas corporativos.
• Vivência com ETL/ELT e modeling de dados para ambientes analíticos.
• Inglês avançado é obrigatório.

Responsabilidades

• Desenvolver e migrar workloads de dados para Azure Databricks.
• Modernizar scripts Python, processos batch e rotinas ETL/ELT.
• Implementar pipelines de dados escaláveis com Spark e Databricks.
• Converta scripts legados para arquiteturas modernas de dados.
• Desenvolver transformações usando Python, SQL e Spark.
• Apoiar integrações com APIs e bancos de dados relacionais.
• Implementar observabilidade, monitoramento e governança de dados.
• Modelar dados em arquiteturas Lakehouse com Delta Lake.
• Executar testes de validação de ativos migrados.
• Garantir qualidade, rastreabilidade e documentação das soluções.

Conhecimentos

Engenharia de Dados

Pipelines analíticos

Python

SQL

APIs

Git

Metodologias ágeis

Inglês avançado

Ferramentas

Azure Databricks

Apache Spark

Delta Lake

Git

Descrição da oferta de emprego

Como Data Engineer Manager, você atuará em iniciativas estratégicas de modernização e migração de dados, contribuindo para a transformação digital de grandes organizações por meio de soluções modernas baseadas em Microsoft Azure e Azure Databricks.

Esta posição combina forte atuação técnica e hands-on, sendo responsável pelo desenvolvimento, migração e validação de ativos de dados, sempre garantindo qualidade, performance, governança e aderência às melhores práticas de engenharia de dados. Você trabalhará em estreita colaboração com Tech Leads, Arquitetos, Business Analysts e demais membros da squad para construir soluções robustas, escaláveis e orientadas ao negócio.

Faça parte de uma equipe apaixonada por dados, inovação e tecnologia, atuando em projetos de modernização que impulsionam resultados reais para nossos clientes. Na Avanade, você encontrará um ambiente colaborativo, desafiador e com oportunidades contínuas de crescimento profissional.

Together We Do What Matters.

Saiba mais sobre alguns de nossos benefícios:

• Vale refeição ou alimentação;
• Cartão Multibenefícios até Consultor Sênior;
• Convênio médico e odontológico;
• Certificações e treinamentos;
• Seguro de Vida;
• Previdência Privada;
• Avababy: acompanhamento da gestação e kit para os novos pais e mães Avanade;
• Participação nos resultados da empresa;
• Wellhub;
• Auxílio Creche;
• Orientador de Carreira - Mentoria de carreira;
• Política de Birthday Off em seu aniversário;
• Sessões de Bem-Estar;
• Para função gerencial ou superior - Veículo corporativo, estacionamento e auxílio combustível.

Responsabilidades

• Desenvolver e migrar workloads de dados para Azure Databricks;
• Participar da modernização de scripts Python, processos de ingestão batch e rotinas ETL/ELT;
• Implementar pipelines de dados escaláveis e resilientes utilizando Apache Spark e Databricks;
• Realizar conversão e adequação de scripts legados para arquiteturas modernas de dados;
• Desenvolver transformações utilizando Python, SQL e Spark;
• Apoiar integrações com sistemas corporativos, APIs e bancos de dados relacionais;
• Participar da implementação de práticas de observabilidade, monitoramento e governança de dados;
• Contribuir para a modelagem de dados em arquiteturas Lakehouse utilizando Delta Lake;
• Executar testes unitários e integrados para validação dos ativos migrados;
• Apoiar atividades de homologação, estabilização e correção de defeitos;
• Garantir a qualidade, rastreabilidade e documentação das soluções desenvolvidas;
• Colaborar com equipes multidisciplinares em ambiente ágil;
• Seguir padrões definidos pela arquitetura e liderança técnica do projeto.

Qualifications

Habilidades e experiências

• Experiência em Engenharia de Dados e desenvolvimento de pipelines analíticos;
• Conhecimento em Azure Databricks;
• Experiência com Apache Spark para processamento distribuído;
• Domínio de Python e SQL;
• Experiência no desenvolvimento de processos ETL/ELT;
• Conhecimento em modelagem de dados para ambientes analíticos;
• Experiência com dados estruturados e semiestruturados;
• Conhecimento de Git e versionamento de código;
• Familiaridade com práticas de desenvolvimento em ambientes cloud;
• Experiência com consumo e integração de APIs;
• Conhecimento de bancos de dados relacionais e SQL avançado;
• Vivência em metodologias ágeis (Scrum, Kanban ou similares);
• Inglês avançado obrigatório (English required).

Requisitos obrigatórios

• Experiência em Engenharia de Dados e desenvolvimento de pipelines analíticos;
• Conhecimento em Azure Databricks;
• Experiência com Apache Spark para processamento distribuído;
• Domínio de Python e SQL;
• Experiência no desenvolvimento de processos ETL/ELT;
• Conhecimento em modelagem de dados para ambientes analíticos;
• Experiência com dados estruturados e semiestruturados;
• Conhecimento de Git e versionamento de código;
• Familiaridade com práticas de desenvolvimento em ambientes cloud;
• Experiência com consumo e integração de APIs;
• Conhecimento de bancos de dados relacionais e SQL avançado;
• Vivência em metodologias ágeis (Scrum, Kanban ou similares);
• Inglês avançado obrigatório (English required).

Diferenciais

• Experiência em projetos de migração de ambientes Hadoop ou Cloudera;
• Vivência no segmento financeiro, bancário ou fintech;
• Certificações Databricks;
• Certificações Microsoft Azure.