Data Engineer Manager | Azure Databricks

Avanade

São Paulo

Presencial

BRL 180 000 - 270 000

Tempo integral

Há 9 dias

Recebe mais respostas dos empregadores

Envia um currículo específico para a oferta em poucos minutos.

Vantagens oferecidas por esta oferta de emprego

Vale refeição/alimentação

Convênio médico e odontológico

Certificações e treinamentos

Seguro de Vida

Previdência Privada

Plataforma Wellhub

Resumo da oferta

Avanade procura um Data Engineer Manager para liderar iniciativas de modernização e migração de dados, com atuação prática em Azure Databricks, Spark e pipelines ETL/ELT. O profissional desenvolverá, migrará e validará ativos de dados, assegurando governança, qualidade e performance.

Você trabalhará com Tech Leads, arquitetos e Analysts para entregar soluções escaláveis e orientadas ao negócio, em ambiente ágil, com oportunidades de crescimento profissional.

Qualificações

Experiência em Engenharia de Dados e desenvolvimento de pipelines analíticos.
Conhecimento em Azure Databricks.
Experiência com Apache Spark para processamento distribuído.
Domínio de Python e SQL.
Experiência no desenvolvimento de processos ETL/ELT.
Conhecimento em modelagem de dados para ambientes analíticos.
Experiência com dados estruturados e semiestruturados.
Conhecimento de Git e versionamento de código.
Familiaridade com práticas de desenvolvimento em ambientes cloud.
Experiência com consumo e integração de APIs.
Conhecimento de bancos de dados relacionais e SQL avançado.
Vivência em metodologias ágeis (Scrum, Kanban ou similares).
Inglês avançado obrigatório (English required).

Responsabilidades

Desenvolver e migrar workloads de dados para Azure Databricks.
Participar da modernização de scripts Python, processos de ingestão batch e rotinas ETL/ELT.
Implementar pipelines de dados escaláveis e resilientes utilizando Apache Spark e Databricks.
Realizar conversão e adequação de scripts legados para arquiteturas modernas de dados.
Desenvolver transformações utilizando Python, SQL e Spark.
Apoiar integrações com sistemas corporativos, APIs e bancos de dados relacionais.
Participar da implementação de práticas de observabilidade, monitoramento e governança de dados.
Contribuir para a modelagem de dados em arquiteturas Lakehouse utilizando Delta Lake.
Executar testes unitários e integrados para validação dos ativos migrados.
Apoiar atividades de homologação, estabilização e correção de defeitos.
Garantir a qualidade, rastreabilidade e documentação das soluções desenvolvidas.
Colaborar com equipes multidisciplinares em ambiente ágil.
Seguir padrões definidos pela arquitetura e liderança técnica do projeto.

Conhecimentos

Azure Databricks

Apache Spark

Python

SQL

ETL/ELT

Data modeling

APIs

Git

Cloud environments

Agile

English

Ferramentas

Azure Databricks

Delta Lake

Descrição da oferta de emprego

Como Data Engineer Manager, você atuará em iniciativas estratégicas de modernização e migração de dados, contribuindo para a transformação digital de grandes organizações por meio de soluções modernas baseadas em Microsoft Azure e Azure Databricks. Esta posição combina forte atuação técnica e hands-on, sendo responsável pelo desenvolvimento, migração e validação de ativos de dados, sempre garantindo qualidade, performance, governança e aderência às melhores práticas de engenharia de dados. Você trabalhará em estreita colaboração com Tech Leads, Arquitetos, Business Analysts e demais membros da squad para construir soluções robustas, escaláveis e orientadas ao negócio. Faça parte de uma equipe apaixonada por dados, inovação e tecnologia, atuando em projetos de modernização que impulsionam resultados reais para nossos clientes. Na Avanade, você encontrará um ambiente colaborativo, desafiador e com oportunidades contínuas de crescimento profissional. Together We Do What Matters. Saiba mais sobre alguns de nossos benefícios:

Vale refeição ou alimentação;
Cartão Multibenefícios até Consultor Sênior;
Convênio médico e odontológico;
Certificações e treinamentos;
Seguro de Vida;
Previdência Privada;
Avababy: acompanhamento da gestação e kit para os novos pais e mães Avanade;
Participação nos resultados da empresa;
Wellhub;
Auxílio Creche;
Orientador de Carreira - Mentoria de carreira;
Política de Birthday Off em seu aniversário;
Sessões de Bem-Estar;
Para função gerencial ou superior - Veículo corporativo, estacionamento e auxílio combustível.

Responsabilidades

Desenvolver e migrar workloads de dados para Azure Databricks;
Participar da modernização de scripts Python, processos de ingestão batch e rotinas ETL/ELT;
Implementar pipelines de dados escaláveis e resilientes utilizando Apache Spark e Databricks;
Realizar conversão e adequação de scripts legados para arquiteturas modernas de dados;
Desenvolver transformações utilizando Python, SQL e Spark;
Apoiar integrações com sistemas corporativos, APIs e bancos de dados relacionais;
Participar da implementação de práticas de observabilidade, monitoramento e governança de dados;
Contribuir para a modelagem de dados em arquiteturas Lakehouse utilizando Delta Lake;
Executar testes unitários e integrados para validação dos ativos migrados;
Apoiar atividades de homologação, estabilização e correção de defeitos;
Garantir a qualidade, rastreabilidade e documentação das soluções desenvolvidas;
Colaborar com equipes multidisciplinares em ambiente ágil;
Seguir padrões definidos pela arquitetura e liderança técnica do projeto.