Sr. Data Engineer - Databricks (Remote)

Involves; Brasil; Teletrabalho; BRL 120.000 - 160.000; Tempo integral

Resumo da oferta

Uma empresa de tecnologia inovadora no Brasil está procurando um Data Engineer para desenvolver pipelines de dados robustos e escaláveis. O candidato ideal deve ter experiência em SQL avançado e ferramentas como Databricks e Microsoft Fabric. A vaga oferece um ambiente remote first e um pacote de benefícios flexível, incluindo plano de saúde, bem-estar e educação.

Serviços

Cultura Remote First & Anywhere Office

Cartão Caju

Plano de Saúde e Odontológico

Wellhub

Conexa Saúde

Programa de Participação nos Resultados

Vale-transporte

Qualificações

• Sólido conhecimento em banco de dados relacional e não-relacional.
• Experiência com modelagem multidimensional.
• SQL/T-SQL avançado com otimização de performance.

Responsabilidades

• Desenvolver pipelines de dados robustos.
• Desenhar e implementar arquiteturas de dados.
• Manter a documentação atualizada dos procedimentos.

Conhecimentos

Banco de dados relacional e não-relacional

Modelagem multidimensional

SQL/T-SQL avançado

Experiência em Business Intelligence

Microsoft Fabric

Databricks

Versionamento com Git

Ferramentas

Terraform

Linux

Descrição da oferta de emprego

Conheça a nossa banda!

Inovadora. Com garra e vontade de dominar o mundo quando o assunto é trade marketing. Empresa de tecnologia de Floripa que valoriza o comprometimento com as entregas e resultados, prezando por relações colaborativas e humanas. Aqui respeitamos a diversidade e valorizamos a autenticidade de cada pessoa. Para subir no palco com a gente, é indispensável respeitar as diferenças.

A área de Intelligence da Involves é responsável por garantir que tudo esteja em perfeita harmonia com os nossos clientes. São as pessoas que estão aqui para o que der e vier, prontas para oferecer uma experiência que ultrapasse todas as expectativas.

Qual será seu papel?

O Data Engineer será responsável por desenvolver pipelines de dados robustos, escaláveis e seguros.

Deverá desenhar e implementar arquiteturas, pipelines e soluções que permitam a migração de um ecossistema com uma bases de dados estruturada, semiestruturadas e não estruturadas até uma infraestrutura de dados formal, moderna e escalável dentro da solução de Lakehouse com Fabric e Databricks. Garantirá a qualidade e confiabilidade dos dados e dos processos. Além disso, dará suporte e apoio em tickets de nível N3, manterá a documentação atualizada dos procedimentos realizados e contribuirá para a melhoria contínua de processos e rotinas da equipe.

Como será seu dia a dia?

• Alinhar requisitos de negócio com os sponsors dos projetos
• Mapear as fontes de dados utilizadas nos projetos (MSSQL, Postgres, MongoDB, etc.)
• Modelar estruturas de dados que deem suporte aos produtos de Retail Analytics e Smart Task.
• Desenvolver processos de Data Integration para o Data Lakehouse.
• Apoiar na resolução de problemas relacionados com a qualidade e oportunidade de dados em Lakehouse.
• Analisar, monitorar e identificar pontos de melhoria no rendimento dos processos de integração de dados.
• Identificar formas de melhorar a confiança, eficiência e qualidade dos dados.
• Desenhar, acompanhar e implementar o plano de migração de clientes com tecnologia antiga até a modernização da base de dados, requisitos de negócio e necessidades de gestão;
• Entregar atualizações às partes interessadas baseadas em análises.
• Investigar e propor novas soluções para a evolução contínua dos processos de engenharia de dados.
• Trabalhar com entregáveis e documentar ações realizadas em ferramentas de gestão de projetos.

Requirements and skills

Para fazer esse show acontecer, precisamos que você domine:

• Ser organizado para trabalhar em um formato auto gerenciável;
• Sólido conhecimento com banco de dados relacional e não-relacional;
• Experiência com modelagem multidimensional;
• SQL/T-SQL avançado (procedimentos armazenados, otimização de performance).
• Ter atuado em projetos de Business Intelligence;
• Microsoft Fabric (Pipelines/ADF, Lakehouse & Warehouse, Mirroring/Shortcuts/OneLake, Deployment pipelines).
• Databricks (Jobs/Lakeflow, Notebooks, Asset Bundles – IaC)
• Versionamento com Git;

Se você quiser se diferenciar é bom você ter…

• Espanhol avançado e ou inglês avançado
• Infraestrutura como código (IaC) com Terraform;
• Experiência com modelagem dimensional/estrela, SCD, CDC e performance tuning em Data Warehouses.
• Experiência com comandos do SO Linux;
• Experiência con Unity Catalog (governança em Databricks), Delta Sharing
• Ter atuado com metodologias ágeis;

Additional information

Benefícios que fazem a diferença no seu dia a dia!

Aqui, valorizamos o seu bem-estar, crescimento e qualidade de vida. Por isso, oferecemos um pacote de benefícios completo e flexível para você trabalhar do seu jeito e viver melhor.

• Cultura Remote First & Anywhere Office – Trabalhe de qualquer lugar.
• Cartão Caju (bandeira Visa) para você usar com: alimentação, refeição, mobilidade, cultura, saúde e educação. Custeado 100% pela empresa.
• Day off - No mês do seu aniversário, escolha um dia para folgar e aproveitar como quiser.
• Plano de Saúde e Odontológico para cuidar de você e seus dependentes.
• Wellhub – Em parceria com a Caju+, escolha o plano que melhor te atende com condições especiais, além de você, seus pais e dependentes legais também usufruem desse benefício;
• Conexa Saúde - 2 sessões de psicoterapia e 2 sessões de nutrição online - 100% custeadas pela empresa.
• Desconto em medicamentos e exames na rede Navdasa;
• Seguro de vida para sua segurança e tranquilidade;
• Budget exclusivo para educação mensal, para você investir no seu crescimento profissional;
• Programa de Participação nos Resultados anual;
• Licença-maternidade e paternidade estendidas;
• Dias extras de folga entre Natal e Ano Novo para aproveitar com quem você ama;
• Vale-transporte (conforme modelo de trabalho) 100% custeado pela empresa;
• Parceria com o plano veterinário Guapeco para cuidar do seu pet;
• Diversas parcerias e descontos exclusivos para você.

Aqui, você tem tudo o que precisa para crescer e viver melhor!

A Involves é para todas as pessoas!