Lider Técnico em Engenharia de Dados

Extractta; Belo Horizonte; Hybrid; BRL 335,000 - 670,000; Full time

Benefits offered by this job

Vale Alimentação

Convênio Sesi/Sesc (saúde, bem-estar,)

Cursos com desconto

Auxílio para Certificações

Crescimento na empresa

Job summary

Extractta procura uma Pessoa Líder Técnica de Engenharia de Dados (Tech Lead) para atuar em um dos maiores bancos digitais do Brasil, influenciando arquitetura, padrões de engenharia e entregas de alto impacto.

O profissional terá atuação hands-on e capacidade de orientar equipes, definindo soluções escaláveis, seguras e eficientes em plataformas de dados com AWS, PySpark e SQL.

Qualifications

• Experiência sólida em Engenharia de Dados, com soluções de alta complexidade.
• Exposição prévia como Tech Lead ou referência técnica de equipes de dados.
• Domínio de Python e SQL, incluindo otimização de consultas e grandes volumes de dados.
• Experiência com Apache Spark e PySpark, processamento distribuído e performance.
• Experiência prática em AWS (S3, Glue, EMR) e arquitetura de dados.
• Conhecimento de Data Lake/Data Warehouse e padrões modernos.

Responsibilities

• Liderar tecnicamente o time de Engenharia de Dados e estabelecer padrões de desenvolvimento.
• Definir arquiteturas de dados escaláveis em AWS, com foco em segurança e confiabilidade.
• Projetar e otimizar pipelines de dados batch e streaming (Python, PySpark, SQL).
• Orientar engenheiros, revisar código e decisões arquiteturais.
• Conduzir discussões técnicas com arquitetos, desenvolvedores e negócios.
• Garantir ingestão, transformação, armazenamento e disponibilização de dados com qualidade.
• Usar serviços AWS (S3, Glue, EMR, Redshift) e monitoramento de pipelines.
• Implementar CI/CD, testes automatizados e IaC.

Skills

Python

SQL Avançado

Apache Spark

PySpark

AWS

Arquitetura de Dados

Liderança Técnica

ETL/ELT

Data Lake / Data Warehouse

Airflow

Tools

Airflow

Terraform (IaC)

Databricks / Delta Lake

Job description

Resumo da vaga:

Estamos em busca de uma Pessoa Líder Técnica de Engenharia de Dados (Tech Lead) para atuar em um dos maiores bancos digitais do país, contribuindo diretamente para a evolução de sua plataforma de dados e para o desenvolvimento de soluções tecnológicas de alta complexidade.

Buscamos uma pessoa com sólida experiência em Engenharia de Dados, visão estratégica de arquitetura e forte capacidade de liderança técnica, que combine atuação hands-on com habilidade para orientar profissionais, tomar decisões arquiteturais e garantir a excelência das entregas.

Você atuará em um ambiente de alta escala, com grandes volumes de dados, arquiteturas distribuídas e soluções em cloud, participando de iniciativas estratégicas relacionadas à modernização de plataformas, processamento de dados, integração de sistemas e disponibilização de informações para diferentes áreas de negócio.

O desafio exige autonomia, pensamento analítico, capacidade de resolução de problemas complexos e compromisso com a construção de soluções robustas, escaláveis, seguras e eficientes.

Responsabilidades e atribuições:

• Exercer a liderança técnica de um time de Engenharia de Dados, atuando como referência na definição de soluções, padrões de desenvolvimento e boas práticas de engenharia.

• Definir e evoluir arquiteturas de dados escaláveis, resilientes e seguras em ambientes cloud, com foco em AWS.

• Projetar, desenvolver e otimizar pipelines de dados para processamento em batch e streaming, utilizando Python, PySpark e SQL.

• Orientar tecnicamente engenheiros de dados, apoiando a resolução de problemas complexos, revisões de código e decisões arquiteturais.

• Conduzir discussões técnicas, refinamentos e definição de soluções em parceria com arquitetos, desenvolvedores, analistas, cientistas de dados e equipes de negócio.

• Garantir a eficiência, confiabilidade, disponibilidade e qualidade dos processos de ingestão, transformação, armazenamento e disponibilização de dados.

• Desenvolver e aprimorar soluções utilizando serviços AWS, como S3, Glue, EMR, Redshift e outros componentes do ecossistema de dados.

• Implementar e evoluir processos de orquestração, automação e monitoramento de pipelines de dados.

• Estabelecer boas práticas de engenharia de software aplicadas a dados, incluindo versionamento, testes automatizados, CI/CD, observabilidade e infraestrutura como código.

• Contribuir para a definição de padrões de modelagem, organização e governança de dados, garantindo rastreabilidade, integridade e conformidade com requisitos de segurança.

• Identificar oportunidades de otimização de desempenho, redução de custos e melhoria contínua da plataforma de dados.

• Apoiar o planejamento técnico das entregas, identificação de riscos, priorização de débitos técnicos e evolução da arquitetura.

• Promover compartilhamento de conhecimento, mentoria e desenvolvimento técnico dos profissionais da equipe.

• Atuar na investigação e resolução de incidentes críticos relacionados a pipelines, integrações e infraestrutura de dados.

Requisitos e qualificações:

• Experiência sólida em Engenharia de Dados, incluindo desenho, desenvolvimento e sustentação de soluções de alta complexidade.

• Experiência prévia como Tech Lead, Líder Técnico ou referência técnica de equipes de Engenharia de Dados.

• Domínio de Python e SQL avançado, incluindo otimização de consultas, transformação de dados e processamento de grandes volumes.

• Experiência sólida com Apache Spark e PySpark, incluindo processamento distribuído e otimização de performance.

• Experiência prática em ambientes AWS, especialmente com serviços de armazenamento, processamento e integração de dados, como S3, Glue e EMR.

• Conhecimento aprofundado em arquitetura de dados, incluindo Data Lake, Data Warehouse e padrões modernos de processamento de dados.

• Experiência na construção e sustentação de pipelines ETL/ELT escaláveis e resilientes.

• Experiência com ferramentas de orquestração de workflows, preferencialmente Apache Airflow.

• Conhecimento em arquiteturas distribuídas, integração de sistemas e processamento de dados em batch e streaming.

• Experiência com bancos de dados relacionais e não relacionais, modelagem de dados e otimização de consultas.

• Vivência com práticas de engenharia de software, incluindo Git, code review, testes automatizados e CI/CD.

• Conhecimento de segurança, qualidade, observabilidade e governança de dados.

• Capacidade de liderar discussões técnicas, orientar decisões arquiteturais e influenciar equipes multidisciplinares.

• Excelente comunicação, autonomia, pensamento crítico e capacidade de resolução de problemas complexos.

Desejáveis:

• Experiência com Apache Kafka e arquiteturas orientadas a eventos.

• Conhecimento em Terraform e práticas de Infrastructure as Code (IaC).

• Vivência com AWS Lambda, Athena, Redshift e Step Functions.

• Experiência com Databricks, Delta Lake e arquiteturas Lakehouse.

• Conhecimento em DataOps, observabilidade de pipelines e automação de processos de dados.

• Experiência com soluções de Change Data Capture (CDC) e integrações de dados em tempo real.

• Conhecimento em FinOps e otimização de custos em ambientes cloud.

• Experiência com governança de dados, catálogos, linhagem e controles de acesso.

• Vivência em ambientes de alta criticidade, especialmente instituições financeiras, bancos digitais ou fintechs.

• Conhecimento da LGPD e de práticas de proteção de dados sensíveis.

• Experiência com soluções analíticas voltadas a crédito, risco, prevenção a fraudes ou produtos financeiros.

• Certificações AWS ou em plataformas de Engenharia de Dados.

Benefícios:

• Vale Alimentação e/ou Vale Refeição;
• Convênio Sesi e Sesc, oferecendo acesso a serviços de saúde, bem-estar e lazer;
• Parceria com Instituições de Ensino, com descontos exclusivos em cursos e programas educacionais;
• Auxílio para Certificações;
• Possibilidade de crescimento na empresa e de participação em projetos estratégicos;
• Oportunidade de trabalhar em uma empresa do mercado em plena expansão.