Engenheiro de Dados AWS Sênior | Remoto

DATASIDE; Brasil; Remote; BRL 180,000 - 260,000; Full time

Benefits offered by this job

Auxílio médico

Wellhub

Terapia online 100% coberta

Nutrição online (até 2 consultas/mês)

Seguro de vida BRL 125 mil

Day off no aniversário

Descanso remunerado

Gamificação interna

Parcerias educacionais com FIAP, Anh”

Bônus por certificação técnica

Job summary

Dataside procura Engenheiro de Dados Sênior para liderar tecnicamente projetos, apoiando o Tech Lead e impulsionando o desenvolvimento da equipe. O profissional terá autonomia para decisões técnicas de ponta a ponta, garantindo entregas alinhadas às necessidades do cliente.

A atuação envolve mentorias, revisões técnicas e impulso na evolução técnica da empresa, conectando entregas ao valor do negócio e fortalecendo a relação com o cliente por meio de propostas bem fundamentadas.

Qualifications

• Experiência com Databricks e AWS em pipelines de dados de grande escala.
• Conhecimento prático de Terraform e IaC para provisionamento de recursos na AWS.
• Domínio de Python avançado, com foco em OO, Clean Code e qualidade de código.
• Conhecimento em governança de dados, ingestão, qualidade e conformidade.
• Experiência com Apache Airflow para orquestração de pipelines de dados.
• Visão arquitetural de dados com foco em escalabilidade e custo.
• Docs técnicos e padrões para plataformas self-service.

Responsibilities

• Ser engenheiro principal em contratos e conduzir decisões técnicas autônomas.
• Apoiar o Tech Lead na liderança técnica e estratégica dos projetos.
• Realizar revisões técnicas aprofundadas e mentorias com o time.
• Propor arquiteturas batch e streaming com visão de escalabilidade e alinhamento ao negócio.
• Construir planos de melhoria de performance e redução de custo.
• Diagnosticar gargalos técnicos e operacionais e propor soluções sustentáveis.
• Comunicar soluções de forma clara para diferentes públicos (negócio, técnico, gestão).
• Trabalhar com múltiplas integrações, altos volumes de dados e demandas críticas de performance.

Skills

Liderança técnica

Arquitetura de dados

Python (OO, Clean Code)

Data Modeling (Data Vault, 3NF, Dim)

Big data/ Spark

Databricks (Unity Catalog, Workflows)

AWS (IAM, EC2, S3)

Airflow

SQL tuning/ performance

Cost optimization/Cloud cost

Infra IaC (Terraform)

LLMs e agentes de código

Tools

Databricks

Terraform

AWS

Airflow

Python

SQL

Git/GitHub Actions

Job description

Papel na empresa

O Engenheiro de Dados Sênior na Dataside atua como liderança técnica nos projetos, apoiando o Tech Lead e contribuindo para o desenvolvimento da equipe e disseminação de conhecimento. Tem autonomia para decisões técnicas de ponta a ponta, garantindo entregas alinhadas às necessidades do cliente. Além disso, realiza mentorias, revisões criteriosas e impulsiona a evolução técnica da empresa. Com uma visão estratégica sobre o valor dos dados, conecta suas entregas ao impacto nos negócios. Mais do que desenvolver soluções, atua como parceiro consultivo, provocando reflexões e fortalecendo a relação com o cliente por meio de propostas bem fundamentadas e confiança.

Responsabilidades

Ser engenheiro principal em contratos e conduzir decisões técnicas de forma autônoma.
Apoiar o Tech Lead na liderança técnica e estratégica dos projetos.
Realizar revisões técnicas aprofundadas e mentorias com o time.
Propor arquiteturas batch e streaming com visão de escalabilidade, eficiência e alinhamento ao negócio.
Construir planos de melhoria de performance e redução de custo.
Diagnosticar gargalos técnicos e operacionais e propor soluções sustentáveis.
Comunicar soluções de forma clara para diferentes níveis (negócio, técnico, gestão).
Trabalhar com múltiplas integrações, altos volumes de dados e demandas críticas de performance.

Requisitos

Experiência com o ecossistema Databricks, incluindo suas principais funcionalidades, recursos e possibilidades de aplicação.

Experiência prática com Terraform e Infraestrutura como Código (IaC) para provisionamento de recursos na AWS.

Conhecimento em AWS, especialmente IAM, policies, roles, permissões e segurança em nuvem, além de EC2, computação em nuvem e sua aplicação em pipelines de dados.

Conhecimento em monitoramento, mensuração e otimização de custos de infraestrutura AWS.

Experiência com Apache Airflow para orquestração e arquitetura de pipelines de dados.

Domínio avançado de Python, com foco em orientação a objetos (OOP), Clean Code, legibilidade e manutenibilidade.

Experiência com LLMs e aplicações agênticas, incluindo o uso de Code Agents para otimização e automação de fluxos de trabalho.

Conhecimento em governança e ciclo de vida dos dados, incluindo ingestão, qualidade, limpeza, conformidade e consumo.

Sólida visão arquitetural de dados, com conhecimento de padrões, escalabilidade e construção de soluções eficientes.

Experiência com documentação técnica e definição de padrões para plataformas self-service.

Comunicação clara, objetiva e assertiva, com capacidade de traduzir decisões técnicas para diferentes públicos, gerenciar stakeholders e alinhar expectativas.

Autonomia e proatividade na condução de demandas, resolução de problemas e tomada de decisões.

Capacidade analítica e senso crítico construtivo para identificar gargalos e propor melhorias, com foco em eficiência operacional, escalabilidade e redução de custos e retrabalho.

Mentalidade de plataforma como produto, considerando a experiência dos usuários internos e a evolução contínua das soluções.

Visão sistêmica e alinhamento das soluções de dados aos objetivos e às necessidades do negócio.

Hard Skills

Spark (avançado), com domínio de Catalyst Optimizer, persistência, broadcast joins, caching e bucketing.
Python com padrões SOLID e reutilização de componentes.
SQL avançado com tuning, particionamento, otimização de planos de execução.
Consumo e integração via APIs RESTful.
Databricks (avançado): Unity Catalog, SQL Warehouse, Workflows, DLT, Pools e configuração de clusters.
AWS Analytics Stack: S3, Athena, Glue, EMR, Redshift, Kinesis, Lambda, Step Functions, Lake Formation, Glue DataBrew, Macie, CloudWatch, SNS, Cost Explorer.
Amazon Redshift (nível avançado): Otimização com sort keys, compressão, vacuum tuning, WLM avançado, SVL/SVV logs, Redshift Spectrum, arquitetura híbrida com S3.
Modelagem de dados: Data Vault, 3NF, Dimensional, pipelines event-driven.
Bancos NoSQL (DynamoDB, MongoDB).
CI/CD com Git, GitHub Actions ou GitLab CI.
Conceito de testes unitários aplicados à pipelines de dados.
Frameworks e práticas de observabilidade e qualidade de dados: Great Expectations, Airflow, Prometheus, Grafana.
Criação de soluções reutilizáveis e componíveis, com foco em Data Products e estratégias Data Mesh.
Avaliação e planejamento de custo em nuvem: uso de Cost Explorer, dimensionamento com AWS Pricing Calculator.

Soft Skills

Liderança técnica e influência estratégica.
Capacidade de “aprender a aprender”.
Clareza e profundidade na comunicação com áreas técnicas e de negócio.
Postura consultiva, com escuta ativa e proatividade.
Espírito de colaboração, mentoria e formação de equipe.
Organização, foco em entrega e alto senso de responsabilidade.
Inglês intermediário.

Certificações Desejáveis

AWS Data Engineer Associate.

AWS Solutions Architect Associate.

Diferenciais

AWS Certified Data Analytics Specialty.

AWS Solutions Architect – Professional.

Databricks Certified Professional Data Engineer.

O que oferecemos:

• Auxílio médico:ajuda de custo mensal para apoiar na contratação do seu plano de saúde.
• Wellhub, pra manter corpo e mente ativos, do jeito que você gosta.
• Terapia online100%custeada pela empresa, porque saúde mental importa.
• Atendimento em nutrição online, com até 2 consultas mensais para cuidar da sua saúde alimentar.
• Seguro de vidacom apólice no valor de R$ 125 mil, garantindo mais segurança para você e sua família.
• Day off no aniversário, porque o seu dia merece ser especial.
• Descanso remunerado, para que você possa recarregar as energias.
• Gamificação interna, transformando conquistas em prêmios e reconhecimento.
• Parcerias educacionaiscom faculdades como FIAP, Anhanguera e Instituto Infnet, pra apoiar seu crescimento e aprendizado.
• Bônus por certificação técnica, reconhecendo e recompensando seu esforço em aprender.

Valorizamos cada voz e cada pessoa, porque sabemos que a diversidade nos torna mais inovadores e fortes.