Data Engineer

Bees Brasil; Campinas; Presencial; BRL 120 000 - 180 000; Tempo integral

Vantagens oferecidas por esta oferta de emprego

Bônus por performance

Previdência privada

Vale-refeição

Plano de saúde

Odontológico

Seguro de vida

Resumo da oferta

A BEES Brasil, plataforma B2B da AB InBev, procura um Intermediate Data Engineer para atuar em Campinas, SP. Você desenvolverá soluções de dados, pipelines e ETL/ELT que suportam produtos e decisões de negócio em escala global, integrando diversas fontes e operando em ambientes cloud.

Você trabalhará com PySpark, Python, Scala e SQL, construindo pipelines com Airflow, Databricks e outras ferramentas, visando performance, confiabilidade e escalabilidade, além de aplicar boas práticas de

Qualificações

• Formação superior em Ciência da Computação, Engenharia da Computação, Sistemas de Informação ou áreas correlatas.
• Inglês intermediário para atuação em ambiente global.
• Experiência com conceitos, ferramentas e desenvolvimento de pipelines de dados.
• Conhecimento em ETL/ELT, transformação, limpeza e agregação de dados.
• Experiência com Python, PySpark, Scala e SQL.
• Vivência com Airflow, Luigi, Mage, Databricks Workflows ou similares.
• Conhecimento em plataformas cloud (AWS, Azure ou Google Cloud).
• Modelagem de dados e construção de soluções escaláveis.
• Otimização de consultas SQL e processamento com PySpark.
• Boas práticas de engenharia, versionamento, testes e documentação.

Responsabilidades

• Desenvolver e implementar soluções de ETL/ELT e integrações entre diferentes sistemas e fontes de dados.
• Projetar, construir e manter pipelines para ingestão, armazenamento, transformação e processamento de grandes volumes de dados.
• Desenvolver processos de transformação, limpeza e agregação de dados utilizando diferentes ferramentas e frameworks.
• Automatizar workflows de processamento para aumentar eficiência, confiabilidade e escalabilidade das soluções.
• Trabalhar em parceria com outros times para garantir segurança, qualidade e conformidade dos dados.
• Desenvolver soluções para otimizar performance e escalabilidade dos sistemas de processamento de dados.
• Construir pipelines utilizando ferramentas de orquestração como Apache Airflow, Luigi, Mage e Databricks Workflows.
• Desenvolver soluções utilizando Python, PySpark, Scala e SQL para manipulação e transformação de dados.
• Aplicar técnicas de modelagem de dados para construir estruturas eficientes e escaláveis.
• Otimizar consultas em PySpark e SQL considerando volume de dados, complexidade e utilização dos recursos.
• Aplicar boas práticas de engenharia, incluindo versionamento, testes e documentação.

Conhecimentos

Python

PySpark

Scala

SQL

Data Pipelines

ETL/ELT

Data Modeling

Big Data

Formação académica

Bacharelado em Ciência da Computação / Engenharia da Computação / Sistemas de Informação

Ferramentas

Apache Airflow

Databricks Workflows

Terraform

GitHub Actions

Azure DevOps

Descrição da oferta de emprego

Junte-se a nós para construir o futuro do comércio B2B!

O BEES é uma plataforma B2B da AB InBev. Por meio do nosso ecossistema, comerciantes e varejistas de 29 países abastecem seus negócios de forma rápida, prática e segura.

No BEES sonhamos grande, lideramos com propósito e desenvolvemos tecnologia que transforma a forma como varejistas e vendedores crescem.

Cada linha de código e cada parceria são feitas à serviço de uma única missão: tornar o comércio melhor para varejistas e vendedores em todo o mundo. Aqui, seu trabalho não é apenas importante. Ele faz a diferença!

Estamos em busca de uma pessoa Intermediate Data Engineer para atuar no BEES, com base em Campinas/SP. Essa pessoa será responsável por desenvolver e evoluir soluções de engenharia de dados que suportam produtos e decisões de negócio em escala global.

O papel combina construção de pipelines, integração de diferentes fontes de dados e processamento em ambientes cloud, garantindo que grandes volumes de informações sejam disponibilizados de forma confiável, segura e eficiente para diferentes times e aplicações.

O que você fará:

• Desenvolver e implementar soluções de ETL/ELT e integrações entre diferentes sistemas e fontes de dados


• Projetar, construir e manter pipelines para ingestão, armazenamento, transformação e processamento de grandes volumes de dados


• Desenvolver processos de transformação, limpeza e agregação de dados utilizando diferentes ferramentas e frameworks


• Automatizar workflows de processamento para aumentar eficiência, confiabilidade e escalabilidade das soluções


• Trabalhar em parceria com outros times para garantir segurança, qualidade e conformidade dos dados


• Desenvolver soluções para otimizar performance e escalabilidade dos sistemas de processamento de dados


• Construir pipelines utilizando ferramentas de orquestração como Apache Airflow, Luigi, Mage e Databricks Workflows


• Desenvolver soluções utilizando Python, PySpark, Scala e SQL para manipulação e transformação de dados


• Aplicar técnicas de modelagem de dados para construir estruturas eficientes e escaláveis


• Otimizar consultas em PySpark e SQL considerando volume de dados, complexidade e utilização dos recursos


• Aplicar boas práticas de engenharia, incluindo versionamento, testes e documentação


• Utilizar ferramentas de dados para ingestão, transformação, análise e disponibilização de informações

O que você precisa ter:

• Formação superior em Ciência da Computação, Engenharia da Computação, Sistemas de Informação ou áreas correlatas


• Inglês intermediário para atuação em ambiente global


• Experiência com conceitos, ferramentas e desenvolvimento de pipelines de dados


• Conhecimento em processos de ETL/ELT, transformação, limpeza e agregação de dados


• Experiência com Python, PySpark, Scala e SQL


• Vivência com frameworks de orquestração como Apache Airflow, Luigi, Mage, Databricks Workflows ou similares


• Conhecimento em plataformas e serviços cloud como AWS, Azure e Google Cloud


• Experiência com modelagem de dados e construção de soluções escaláveis


• Conhecimento em otimização de performance de consultas SQL e processamento com PySpark


• Familiaridade com princípios de engenharia de software aplicados a projetos de dados


• Experiência com boas práticas de versionamento, testes e documentação


• Forte raciocínio lógico e capacidade analítica para resolução de problemas


• Organização, autonomia e comprometimento com prazos e qualidade das entregas


• Boa comunicação e facilidade para trabalhar com diferentes times e stakeholders


• Experiência no desenvolvimento e manutenção de APIs para troca de dados entre aplicações será considerada um diferencial


• Vivência com serviços de dados em AWS, Azure ou Google Cloud será considerada um diferencial


• Conhecimento em ferramentas de automação e DevOps como Azure DevOps, Terraform e GitHub Actions será considerado um diferencial

Pessoas apaixonadas por dados, tecnologia e construção de soluções escaláveis. Se você gosta de desenvolver pipelines robustos, trabalhar com grandes volumes de dados e resolver desafios técnicos em ambientes cloud, essa vaga é para você.

O que oferecemos

• Bônus baseado em performance*


• Bônus de assiduidade*


• Previdência privada


• Vale-refeição


• Plano de saúde, odontológico e seguro de vida