Engenheiro de Dados AWS Sênior | Remoto

Meu Home; Brasil; Remote; BRL 246,000 - 424,000; Full time

Benefits offered by this job

Auxílio médico

Wellhub

Terapia online

Nutrição online

Seguro de vida

Day off no aniversário

Descanso remunerado

Gamificação interna

Parcerias educacionais

Bônus por certificação técnica

Job summary

Meu Home busca Engenheiro de Dados Sênior para liderar tecnicamente projetos complexos, apoiando o Tech Lead e orientando a equipe com foco em valor de negócio. Você terá autonomia para decisões técnicas, mentorias e revisão de código, promovendo evolução técnica da empresa e parcerias consultivas com clientes.

O profissional criará arquiteturas batch e streaming escaláveis, trabalhando com grandes volumes de dados, integrações diversas e pipelines de dados, alinhando entregas aos objetivos

Qualifications

• Experiência com Databricks e Spark para pipelines de dados.
• Arquiteturas batch e streaming com foco em escalabilidade.
• Conhecimento em AWS (IAM, políticas, roles) e segurança na nuvem.
• Gestão de custos de infraestrutura na AWS e monitoramento.

Responsibilities

• Ser engenheiro principal em contratos e conduzir decisões técnicas de forma autônoma.
• Apoiar o Tech Lead na liderança técnica e estratégica dos projetos.
• Realizar revisões técnicas e mentorias com o time.
• Propor arquiteturas batch e streaming com visão de escalabilidade, eficiência e alinhamento ao negócio.
• Construir planos de melhoria de performance e redução de custo.
• Diagnosticar gargalos técnicos e operacionais e propor soluções sustentáveis.
• Comunicar soluções de forma clara para diferentes níveis (negócio, técnico, gestão).
• Trabalhar com múltiplas integrações, altos volumes de dados e demandas críticas de performance.

Skills

Spark advanced

Python OOP

SQL tuning

REST APIs

Databricks advanced

AWS Analytics

Redshift advanced

Data modeling

NoSQL DBs

CI/CD

Unit tests

Observability

Data Mesh

Cost optimization

Tools

Terraform IaC

Airflow

Git/GitHub Actions

Job description

Papel na empresa

O Engenheiro de Dados Sênior na Dataside atua como liderança técnica nos projetos, apoiando o Tech Lead e contribuindo para o desenvolvimento da equipe e disseminação de conhecimento. Tem autonomia para decisões técnicas de ponta a ponta, garantindo entregas alinhadas às necessidades do cliente. Além disso, realiza mentorias, revisões criteriosas e impulsiona a evolução técnica da empresa. Com uma visão estratégica sobre o valor dos dados, conecta suas entregas ao impacto nos negócios. Mais do que desenvolver soluções, atua como parceiro consultivo, provocando reflexões e fortalecendo a relação com o cliente por meio de propostas bem fundamentadas e confiança.

Responsabilidades

• Ser engenheiro principal em contratos e conduzir decisões técnicas de forma autônoma.


• Apoiar o Tech Lead na liderança técnica e estratégica dos projetos.


• Realizar revisões técnicas aprofundadas e mentorias com o time.


• Propor arquiteturas batch e streaming com visão de escalabilidade, eficiência e alinhamento ao negócio.


• Construir planos de melhoria de performance e redução de custo.


• Diagnosticar gargalos técnicos e operacionais e propor soluções sustentáveis.


• Comunicar soluções de forma clara para diferentes níveis (negócio, técnico, gestão).


• Trabalhar com múltiplas integrações, altos volumes de dados e demandas críticas de performance.

Requisitos

Experiência com o ecossistema Databricks, incluindo suas principais funcionalidades, recursos e possibilidades de aplicação.

Experiência prática com Terraform e Infraestrutura como Código (IaC) para provisionamento de recursos na AWS.

Conhecimento em AWS, especialmente IAM, policies, roles, permissões e segurança em nuvem, além de EC2, computação em nuvem e sua aplicação em pipelines de dados.

Conhecimento em monitoramento, mensuração e otimização de custos de infraestrutura AWS.

Experiência com Apache Airflow para orquestração e arquitetura de pipelines de dados.

Domínio avançado de Python, com foco em orientação a objetos (OOP), Clean Code, legibilidade e manutenibilidade.

Experiência com LLMs e aplicações agênticas, incluindo o uso de Code Agents para otimização e automação de fluxos de trabalho.

Conhecimento em governança e ciclo de vida dos dados, incluindo ingestão, qualidade, limpeza, conformidade e consumo.

Sólida visão arquitetural de dados, com conhecimento de padrões, escalabilidade e construção de soluções eficientes.

Experiência com documentação técnica e definição de padrões para plataformas self-service.

Comunicação clara, objetiva e assertiva, com capacidade de traduzir decisões técnicas para diferentes públicos, gerenciar stakeholders e alinhar expectativas.

Autonomia e proatividade na condução de demandas, resolução de problemas e tomada de decisões.

Capacidade analítica e senso crítico construtivo para identificar gargalos e propor melhorias, com foco em eficiência operacional, escalabilidade e redução de custos e retrabalho.

Mentalidade de plataforma como produto, considerando a experiência dos usuários internos e a evolução contínua das soluções.

Visão sistêmica e alinhamento das soluções de dados aos objetivos e às necessidades do negócio.

Hard Skills

• Spark (avançado), com domínio de Catalyst Optimizer, persistência, broadcast joins, caching e bucketing.


• Python com padrões SOLID e reutilização de componentes.


• SQL avançado com tuning, particionamento, otimização de planos de execução.


• Consumo e integração via APIs RESTful.


• Databricks (avançado): Unity Catalog, SQL Warehouse, Workflows, DLT, Pools e configuração de clusters.


• AWS Analytics Stack: S3, Athena, Glue, EMR, Redshift, Kinesis, Lambda, Step Functions, Lake Formation, Glue DataBrew, Macie, CloudWatch, SNS, Cost Explorer.


• Amazon Redshift (nível avançado): Otimização com sort keys, compressão, vacuum tuning, WLM avançado, SVL/SVV logs, Redshift Spectrum, arquitetura híbrida com S3.


• Modelagem de dados: Data Vault, 3NF, Dimensional, pipelines event-driven.


• Bancos NoSQL (DynamoDB, MongoDB).


• CI/CD com Git, GitHub Actions ou GitLab CI.


• Conceito de testes unitários aplicados à pipelines de dados.


• Frameworks e práticas de observabilidade e qualidade de dados: Great Expectations, Airflow, Prometheus, Grafana.


• Criação de soluções reutilizáveis e componíveis, com foco em Data Products e estratégias Data Mesh.


• Avaliação e planejamento de custo em nuvem: uso de Cost Explorer, dimensionamento com AWS Pricing Calculator.

Soft Skills

• Liderança técnica e influência estratégica.


• Capacidade de “aprender a aprender”.


• Clareza e profundidade na comunicação com áreas técnicas e de negócio.


• Postura consultiva, com escuta ativa e proatividade.


• Espírito de colaboração, mentoria e formação de equipe.


• Organização, foco em entrega e alto senso de responsabilidade.


• Inglês intermediário.

Certificações Desejáveis

• AWS Data Engineer Associate.


• AWS Solutions Architect Associate.

Diferenciais

• AWS Certified Data Analytics Specialty.


• AWS Solutions Architect – Professional.


• Databricks Certified Professional Data Engineer.

O que oferecemos:

• Auxílio médico: ajuda de custo mensal para apoiar na contratação do seu plano de saúde.


• Wellhub, pra manter corpo e mente ativos, do jeito que você gosta.


• Terapia online 100%custeada pela empresa, porque saúde mental importa.


• Atendimento em nutrição online, com até 2 consultas mensais para cuidar da sua saúde alimentar.


• Seguro de vida com apólice no valor de R$ 125 mil, garantindo mais segurança para você e sua família.


• Day off no aniversário, porque o seu dia merece ser especial.


• Descanso remunerado, para que você possa recarregar as energias.


• Gamificação interna, transformando conquistas em prêmios e reconhecimento.


• Parcerias educacionais com faculdades como FIAP, Anhanguera e Instituto Infnet, pra apoiar seu crescimento e aprendizado.


• Bônus por certificação técnica, reconhecendo e recompensando seu esforço em aprender.

Valorizamos cada voz e cada pessoa, porque sabemos que a diversidade nos torna mais inovadores e fortes.