Pessoa Engenheira de Dados - Sênior

BIP Brasil; São Paulo; Sur place; BRL 180 000 - 360 000; Plein temps

Avantages offerts par ce poste

All Points

Assistência Médica

Assistência Odontológica

Seguro de vida

Convênio para Pet

Mobilidade

Reembolso Flex

Vale Refeição

Vale Alimentação

Birthday off

Wellhub (Gympass)

Résumé du poste

BIP BRASILIEN procura Engenheira de Dados Sênior para desenvolver soluções de integração e processamento de dados, com foco em qualidade, desempenho e confiabilidade, transformando dados de diversas origens em informações rastreáveis e prontas para consumo por aplicações de negócio.

A posição envolve construção de pipelines, organização de camadas de dados, regras de transformação, validação e participação de revisões técnicas, com atuação colaborativa entre arquitetura, desenvolvimento e áreas

Qualifications

• Experiência sólida em engenharia de dados com pipelines em produção.
• Domínio de SQL e Python para transformação e integração de dados.
• Experiência com processamento distribuído e grandes volumes de dados.
• Conhecimento de modelagem de dados, cargas incrementais e reconciliação.
• Prática com Git, revisão de código e testes automatizados.

Responsabilités

• Desenvolver pipelines de ingestão, transformação e disponibilização de dados.
• Implementar transformações com SQL e Python e orquestração com controle de falhas.
• Preservar a origem dos dados, garantindo rastreabilidade e versionamento.
• Implementar validações de negócio, deduplicação e reconciliação.
• Traduzir regras de negócio em transformações com documentação.
• Disponibilizar dados para sistemas consumidores com contratos versionados.
• Construir rotinas idempotentes e recuperação diante de falhas.
• Optimizar consultas, particionamento e processamento distribuído.
• Testes automatizados, monitoramento de pipelines e suporte aos times.
• Documentar regras, contratos e apoiar revisões de código.

Connaissances

Engenharia de dados

SQL

Python

Data pipelines

Databricks

Orquestração de dados

Git

Formation

Superior completo

Outils

Git

Description du poste

Job description

Buscamos umaPessoa Engenheira de Dados Sênior para desenvolver soluções de integração eprocessamento de dados, com foco em qualidade, desempenho e confiabilidade. Seu desafio será transformar dados de diferentes origens em informaçõesconsistentes, rastreáveis e prontas para consumo por aplicações e áreas denegócio. A atuação envolve a construção de pipelines, a organização de camadasde dados e a implementação de regras de transformação e validação. Você trabalhará em parceria com arquitetura, desenvolvimento, qualidade e áreasde negócio, com participação direta na implementação, nas revisões técnicas ena evolução da solução.

Main responsibilities

- Desenvolver eevoluir pipelines de ingestão, transformação e disponibilização de dados,seguindo boas práticas de engenharia. - Implementar modelos e transformações com SQL e Python, além de fluxos deorquestração com controle de dependências e tratamento de falhas. - Preservar os dados recebidos e sua origem, garantindo rastreabilidade,controle de versões e possibilidade de reprocessamento. - Implementar validações estruturais e de negócio, deduplicação ereconciliação, registrando inconsistências de forma compreensível para as áreasresponsáveis. - Traduzir regras de negócio em transformações e cálculos reproduzíveis, comatenção à precisão e à documentação dos resultados. - Disponibilizar dados e arquivos para sistemas consumidores, respeitandocontratos versionados, integridade e compatibilidade entre aplicações. - Construir rotinas idempotentes e mecanismos de recuperação, evitandoduplicidade ou perda de dados em reexecuções e falhas de publicação. - Otimizar consultas, particionamento e processamento distribuído, acompanhandodesempenho, consumo de recursos e custo das execuções. - Criar testes automatizados de dados e de contrato, monitorar pipelines einvestigar falhas junto aos times envolvidos. - Documentar regras e contratos, participar de revisões de código e apoiar odesenvolvimento técnico do time.

Requirements and skills

Formação:

Superior completo: todos os cursos são bem vindos!

Conhecimento necessários:

- Experiênciasólida em engenharia de dados, com atuação prática na construção e sustentaçãode pipelines em produção no databricks - Domínio de SQL e experiência com Python para tratamento e integração dedados. - Experiência com processamento distribuído, organização de camadas de dados earmazenamento de grandes volumes de informação. - Experiência com ferramentas de transformação e orquestração de dados,incluindo testes, documentação, dependências e tratamento de falhas. - Vivência com armazenamento em nuvem e boas práticas de organização, acesso epublicação de dados. - Conhecimento de modelagem de dados, cargas incrementais, evolução de schemas,qualidade e reconciliação de dados. - Capacidade de projetar processamentos rastreáveis e reexecutáveis, comcontrole de identidade, versão e integridade do conteúdo. - Prática com Git, revisão de código, testes automatizados e integração eentrega contínuas. - Autonomia para investigar problemas e propor melhorias, com comunicação clarapara discutir regras e resultados com pessoas de tecnologia e negócio.

Additional information

CONHEÇA NOSSOS BENEFÍCIOS

Alguns dos nossos benefícios são flexíveis para que você possa distribuí-los de acordo com suas necessidades, interesses e momento de vida. São eles:

• All Points (Programa de pontos para passagens áreas e hospedagens);
• Assistência Médica;
• Assistência Odontológica;
• Seguro de vida;
• Convênio para Pet;
• Mobilidade (incluindo opção de combustível e Uber, 99);
• Reembolso Flex (óculos, vacinas, educação, shows e outros);
• Vale Refeição e/ou Vale Alimentação.

Outros benefícios:

• Birthday off;
• Wellhub (Gympass);
• Clube Alelo com diversos descontos em lojas e farmácias;
• Licença Maternidade de 180 dias;
• Licença Paternidade de 30 dias;
• Auxílio creche no primeiro ano do bebê;
• Vale Transporte conforme a demanda do projeto ou área;
• Programa de bônus anual;
• Comissionamento por indicação de novos clientes.

PROGRAMAS DE DESENVOLVIMENTO

Um dos pontos fortes de ser Biper é que ousamos em pensar como empreendedores e moldamos nosso futuro com nossa capacidade de pensar minuciosamente e agir com três passos à frente, pavimentando o caminho para o futuro que nossos clientes querem viver.

E para isso, precisamos estar constantemente aprendendo e reaprendendo, somos #LifeLongLearning.

Na BIP temos programas consolidados a nível Global e nacional para que você tenha uma jornada de desenvolvimento, crescimento e liberdade para você conquistar o que sonha. Aqui você é o protagonista da sua carreira!

Vamos juntos nessa? Confere os principais programas que a BIP pode te oferecer para você chegar aonde deseja:

• Um centro de CAPACITAÇÃO e FORMAÇÃO Global com os conteúdos e cursos mais atualizados do mercado;
• Flex Time - um momento da sua semana dedicado para o seu desenvolvimento;
• Programas de mentoria com Líderes referências em sua atuação;
• Avaliação de Desempenho semestral;
• Cultura de Feedback e 1:1 recorrentes com sua liderança e time;
• Acompanhamento de um Plano de Desenvolvimento personalizado pra você e com seus objetivos;
• Darwin - Programa global de formação de jovens talentos, para desenvolver soft e hard skills;
• Grounding –Um programa Global de formação para os profissionais recém contratados em todo o mundo que estão no começo da carreira de consultoria;
• Induction - Onboarding Internacional conduzido por Heads de RH e negócio para os novos entrantes da Bip de todos os países para promover nossa cultura, valores, proposito e apresentar nossos programas de iniciativa Global.
• Spinnaker: Treinamento focado em aprimorar habilidades estratégicas de Gerentes e Gerentes Seniores, apoiando e facilitando o desenvolvimento de negócios dentro de um ecossistema complexo.