Engenheiro(a) de Dados Sênior – Databricks | Spark | AWS

BRQ; São Paulo; Híbrido; BRL 180 000 - 280 000; Tempo integral

Resumo da oferta

BRQ está contratar Engenheiro(a) de Dados Sênior para atuação em ambiente de alta complexidade, com foco em Databricks e Apache Spark, construção de pipelines e garantia de qualidade dos dados. O papel demanda autonomia técnica e experiência em Data Lake/Lakehouse.

A vaga é híbrida, com atuação na região de São Paulo e contratação CLT. Benefícios são oferecidos conforme a política BRQ, com foco em performance, confiabilidade e escalabilidade das soluções.

Qualificações

• Experiência sólida com Databricks e Spark.
• Construção e orquestração de pipelines de dados.
• Conhecimento de Data Lake/Lakehouse e Data Quality.
• Experiência com AWS e Terraform/ IaC.

Responsabilidades

• Desenvolver soluções de processamento e transformação com Databricks e Spark.
• Construir, executar, monitorar e evoluir pipelines de dados.
• Orquestrar ingestão, transformação e validação de dados.
• Implementar Data Quality em camadas do Data Lake/Lakehouse.
• Trabalhar com processamento distribuído de grandes volumes de dados com Spark.
• Automatizar implantação com Databricks Bundles/Terraform.
• Aplicar Infraestrutura como Código (IaC).
• Atuar com AWS e serviços em nuvem.
• Contribuir para práticas de engenharia de dados com qualidade, performance e escalabilidade.

Conhecimentos

Autonomia técnica

Senioridade

Capacidade de atuar em ambientes de复杂a

Ferramentas

Databricks

Apache Spark

Terraform

AWS

Databricks Bundles

IaC

Data Lake/Lakehouse

Descrição da oferta de emprego

Sobre a vaga

Você é apaixonado(a) por dados, processamento distribuído e construção de soluções escaláveis? Temos uma excelente oportunidade para atuar como Engenheiro(a) de Dados Sênior, participando do desenvolvimento e evolução de soluções de dados em um ambiente de alta complexidade.

Buscamos uma pessoa com sólida experiência em Databricks e Apache Spark, capaz de atuar com autonomia na construção, orquestração e monitoramento de pipelines, além de garantir a qualidade dos dados ao longo das diferentes camadas de um ambiente Data Lake/Lakehouse.

Modelo de trabalho: Híbrido – 2x por semana na região da Faria Lima/SP
Contratação: CLT + benefícios

Principais responsabilidades

• Desenvolver e implementar soluções de processamento e transformação de dados utilizando Databricks e Apache Spark;
• Construir, executar, monitorar e evoluir pipelines de dados;
• Atuar na orquestração de processos de ingestão, transformação e validação de dados;
• Implementar e acompanhar processos de Data Quality em todas as camadas do Data Lake/Lakehouse;
• Trabalhar com processamento distribuído de grandes volumes de dados utilizando Apache Spark;
• Automatizar processos de implantação e configuração de ambientes utilizando Databricks Bundles e/ou Terraform;
• Aplicar conceitos e boas práticas de Infraestrutura como Código (IaC);
• Atuar com soluções e serviços em ambiente AWS;
• Contribuir para a definição e aplicação de boas práticas de engenharia de dados, garantindo qualidade, performance, escalabilidade e confiabilidade das soluções.

Requisitos técnicos imprescindíveis

• Experiência sólida com Databricks;
• Experiência avançada com Apache Spark, principalmente no processamento distribuído de grandes volumes de dados;
• Vivência sólida na construção e orquestração de pipelines de dados;
• Experiência com processos de ingestão, transformação e validação de dados;
• Experiência na implementação de processos e práticas de Data Quality;
• Vivência com arquiteturas Data Lake e/ou Lakehouse;
• Conhecimento em Databricks Bundles e/ou Terraform;
• Conhecimento de Infraestrutura como Código (IaC);
• Experiência com AWS (Amazon Web Services);
• Perfil com senioridade, autonomia técnica e capacidade de atuar em ambientes de alta complexidade.

Cultura na BRQ

Chamamos de BRQ Way o nosso jeito de cuidar das pessoas, com iniciativas de carreira e desenvolvimento, saúde e bem-estar, e comunicação e conexão. Trabalhamos com flexibilidade de acordo com o contexto do projeto (anywhere office, híbrido ou presencial) e investimos em desenvolvimento contínuo com BRQ Academy, mentoria, incentivo a certificações e programas de idiomas, entre outras frentes.

Diversidade, inclusão e liberdade

Diversidade, inclusão e liberdade fazem parte do nosso dia a dia. Incentivamos a candidatura de pessoas com perfis, trajetórias e realidades diversas, além de contarmos com oportunidades afirmativas para pessoas com deficiência e mulheres. Também temos três Grupos de Afinidade, chamados de Roars, que criam espaços de troca e impulsionam iniciativas inclusivas na empresa.

https://www.brq.com/carreiras/