Engenheiro de Dados Pleno (Databricks)

Anbima; São Paulo; Híbrido; BRL 20.000 - 80.000; Tempo integral

Resumo da oferta

Uma empresa líder no setor financeiro está buscando um Engenheiro de Dados Pleno para desenvolver e implementar soluções inovadoras em seus sistemas de dados. O candidato ideal terá forte experiência em Databricks e habilidades em Python e SQL, além de atuar em um ambiente híbrido com benefícios competitivos.

Serviços

Vale Refeição

Vale Alimentação

Assistência médica

Assistência odontológica

Previdência privada

Auxílio home office

Licença parental de 6 meses

Auxílio funeral

Dia de folga no aniversário

Parcerias

Qualificações

• Experiência em Engenharia de Dados com foco em Databricks.
• Domínio de Spark, Python e SQL para manipulação de dados.
• Excelentes habilidades de comunicação verbal e escrita.

Responsabilidades

• Design e implementação de pipelines de dados no Databricks.
• Colaboração com stakeholders para soluções técnicas.
• Gerenciamento de projetos com verificação de prazos.

Conhecimentos

Engenharia de Dados

Databricks

Python

SQL

Spark

Airflow

GitLab

Comunicação

Descrição da oferta de emprego

HR | Specialist Tech Recruiter | Talent Acquisition | HRBP | Onboarding | Projects | People | Diversidade, Equidade e...

Nós movemos o mercado financeiro para o futuro, impulsionando negócios e potencializando a economia do país. Com o maior hub de dados e informações do cenário financeiro brasileiro, lideramos iniciativas que realmente importam: defendemos os interesses dos nossos parceiros e investidores, fornecemos ferramentas analíticas e dados, educamos investidores e certificamos profissionais, além de estabelecer regras para as instituições do mercado financeiro e de capitais.

Nós valorizamos a diversidade e sabemos que um time formado por pessoas com perfis diversos nos torna tão forte e único quanto a nossa marca. Temos orgulho de aumentar continuamente a representatividade de pessoas negras, pessoas com deficiência, LGBTQIAPN+ e mulheres em nossos times.

Como Engenheira de Dados Pleno, você terá a oportunidade de desenvolver e implementar pipelines de dados de ponta, apoiando também em processos de Arquitetura e soluções de Data Lake, além de aprimorar seus conhecimentos em novas tecnologias como Daitaku.

Responsabilidades e atribuições

1. Design, desenvolvimento e implementação de pipelines de dados de ponta a ponta utilizando Databricks para ETL, streaming e processamento em lote.
2. Implementar arquitetura de data lake, data lakehouse e data warehouses no Databricks, garantindo escalabilidade, confiabilidade e desempenho.
3. Colaborar com stakeholders e equipe para transformar requisitos de negócios em soluções técnicas escaláveis.
4. Garantir qualidade, governança de dados, segurança e otimização no ambiente Databricks.
5. Aplicar conhecimentos técnicos para solucionar desafios de clientes e expandir oportunidades de negócios.
6. Gerenciar projetos, assegurando cumprimento de prazos e orçamentos.
7. Automatizar processos de CICD de forma segura e robusta para entrega de pipelines de dados.

Requisitos e qualificações

1. Experiência em Engenharia de Dados com foco em Databricks.
2. Experiência na construção e otimização de soluções de dados usando Databricks, pipelines, Airflow, Delta Lake, Unity Catalog, Spark, Python, SQL, entre outros.
3. Experiência com plataformas de nuvem, preferencialmente AWS, incluindo EC2, S3, Redshift, Tokens, integrando com Databricks.
4. Domínio de Spark, Python, SQL para manipulação de dados.
5. Experiência com versionamento de código usando GitLab.
6. Implementação de CICD com conceitos de GitFlow.
7. Capacidade de desenvolver arquitetura de dados usando Databricks e AWS, aplicando conceitos avançados de Data Lake, Data Lakehouse, Data Mesh, Data Sharing, RedShift e integrações de ferramentas de dados, garantindo escalabilidade, segurança e confiabilidade.
8. Excelentes habilidades de comunicação verbal e escrita.
9. Conhecimentos em Dataiku (desejável).

Informações adicionais

• Salário competitivo.
• Vale Refeição R$ 1.111,00 e Vale Alimentação R$ 875,29.
• Assistência médica e odontológica.
• Modelo de trabalho híbrido (presencial 3x por semana e home-office 2x por semana).
• Previdência privada, auxílio home office, licença parental de 6 meses, auxílio funeral, parcerias, dia de folga no aniversário, entre outros benefícios.

Local de trabalho: Nosso escritório fica na região de Pinheiros, próximo à estação de trem. Adotamos um modelo híbrido de trabalho.

Outras oportunidades:

• Analista de Dados Jr (área de Fraude) - São Paulo/SP
• Pessoa Engenheira de Dados - Destinada para Pessoas Negras
• Analista Júnior de Dados - Prevenção à Fraude
• Engenheiro de Dados Jr - Banco de Talentos
• Engenheiro(a) de Dados Pleno - Híbrido SP
• Banco de Talentos - Data Engineer Spec I e II (Júnior e Pleno)
• Engenheiro(a) de Dados Júnior (Python, SQL, Big Data)