Engenheiro(A) De Dados Sênior Databricks

Netvagas; São Paulo; Presencial; BRL 180 000 - 300 000; Tempo integral

Vantagens oferecidas por esta oferta de emprego

Vale alimentação

Vale refeição

Convênio Sesi e Sesc

Parcerias com instituições de ensino

Auxílio para certificações

Resumo da oferta

Netvagas busca Engenheiro(a) de Dados Sênior para projetar e sustentar soluções modernas de dados com alta volumetria. O papel envolve atuação com Databricks, Apache Spark e PySpark para criar pipelines robustos.

O candidato ideal terá experiência em Data Lake/Lakehouse, governança de dados, CI/CD e infraestrutura como código, trabalhando junto a times de dados e negócio.

Qualificações

• Perfil com experiência sólida em Engenharia de Dados e visão de arquitetura.
• Capacidade de análise de performance e troubleshooting de pipelines.
• Proatividade, colaboração e autonomia para conduzir demandas técnicas.

Responsabilidades

• Desenvolver, manter e otimizar pipelines de dados (ETL/ELT) utilizando Databricks.
• Construir soluções com Apache Spark e PySpark.
• Trabalhar com grandes volumes de dados assegurando performance e escalabilidade.
• Implementar governança, qualidade e segurança de dados; monitoramento de falhas.

Descrição da oferta de emprego

Estamos em busca de uma pessoa Engenheiro(a) de Dados Sênior com sólida experiência em Databricks, para atuar na construção, evolução e sustentação de soluções modernas de dados em ambientes de alta volumetria e complexidade.

Buscamos uma pessoa com forte conhecimento técnico, visão de arquitetura e preocupação com qualidade, performance e escalabilidade. O profissional atuará em conjunto com times multidisciplinares na criação de pipelines, processamento e disponibilização de dados para consumo analítico e demais soluções de negócio.

Responsabilidades e atribuições:

• Desenvolver, manter e otimizar pipelines de dados (ETL/ELT) utilizando Databricks;
• Construir soluções de processamento de dados utilizando Apache Spark e PySpark;
• Trabalhar com grandes volumes de dados, garantindo performance, escalabilidade e confiabilidade;
• Desenvolver e manter processos de ingestão, transformação e disponibilização de dados;
• Atuar na construção e evolução de arquiteturas Data Lake e Lakehouse;
• Implementar boas práticas de qualidade, governança e segurança de dados;
• Realizar análise e otimização de performance de jobs, pipelines e consultas;
• Apoiar definições técnicas e arquiteturais relacionadas à plataforma de dados;
• Implementar processos de monitoramento e tratamento de falhas nos pipelines;
• Trabalhar com versionamento de código e processos de CI/CD;
• Participar de cerimônias ágeis e atuar de forma colaborativa com Engenharia de Dados, Analytics, Arquitetura e áreas de negócio;
• Apoiar tecnicamente profissionais do time, contribuindo com boas práticas e evolução das soluções;
• Perfil analítico, colaborativo e com autonomia para conduzir demandas técnicas.

Requisitos e qualificações:

• Experiência sólida como Engenheiro(a) de Dados, preferencialmente em nível Sênior;
• Experiência comprovada com Databricks;
• Experiência avançada com SQL;
• Conhecimento em Delta Lake;
• Experiência na construção e manutenção de pipelines ETL/ELT;
• Experiência com processamento de grandes volumes de dados;
• Conhecimento em modelagem e transformação de dados;
• Experiência com Git e práticas de CI/CD;
• Conhecimento de boas práticas de segurança, governança e qualidade de dados;
• Capacidade de análise de performance e troubleshooting de pipelines;
• Experiência com Databricks Unity Catalog;
• Conhecimento de Databricks Workflows/Jobs;
• Experiência com Medallion Architecture (Bronze, Silver e Gold);
• Conhecimento em Python para Engenharia de Dados;
• Experiência com serviços de dados em AWS, Azure ou GCP;
• Conhecimento em ferramentas de orquestração, como Apache Airflow ou Azure Data Factory;
• Experiência com infraestrutura como código, como Terraform;
• Certificações relacionadas ao Databricks ou plataformas Cloud;
• Experiência em ambientes de alta volumetria e soluções críticas de dados.
• Vale Alimentação e/ou Vale Refeição;
• Convênio Sesi e Sesc, oferecendo acesso a serviços de saúde, bem-estar e lazer;
• Parceria com Instituições de Ensino, com descontos exclusivos em cursos e programas educacionais;
• Auxílio para Certificações;
• Possibilidade de crescimento na empresa e de participação em projetos estratégicos;
• Oportunidade de trabalhar em uma empresa do mercado em plena expansão.

Criar um alerta de emprego para esta pesquisa

Engenheiro(a) de dados sênior databricks BRASIL, BR, BR