Engenheiro de Dados AWS - Sênior

Assurance; Brasil; Teletrabalho; BRL 240 000 - 420 000; Tempo integral

Vantagens oferecidas por esta oferta de emprego

Remote work

PJ contratação

Resumo da oferta

Assurance busca Engenheiro de Dados AWS Sênior para atuar na construção e evolução de plataformas de dados na nuvem, com foco em Data Lake, Lakehouse e pipelines de alta escala para Wealth & Asset Management.

O profissional trabalhará com PySpark, AWS (S3, Redshift, Glue, Lambda, Athena), Iceberg e Airflow, buscando alta performance, governança de dados e disponibilidade confiável das soluções.

Qualificações

• Experiência sólida com PySpark e pipelines de dados.
• Conhecimento forte em AWS (S3, Redshift, Glue, Lambda, Athena).
• Experiência prática com Apache Iceberg em produção.
• Experiência com Apache Airflow para orquestração e monitoramento.
• SQL avançado, incluindo otimização de consultas e modelagem de dados.
• Experiência com ETL/ELT e processamento de grandes volumes de dados.
• Conhecimento em Data Lake, Data Warehouse e Lakehouse.
• Inglês técnico para participação em reuniões com equipes dos EUA.

Responsabilidades

• Desenvolver pipelines de dados escaláveis utilizando PySpark e AWS.
• Atuar com Redshift, Iceberg e Airflow.
• Desenvolver soluções de Data Lake/Lakehouse.
• Garantir performance, qualidade, disponibilidade e confiabilidade dos dados.
• Otimizar consultas SQL, jobs Spark e fluxos de processamento.
• Apoiar iniciativas de governança, segurança e compliance.
• Atuar na resolução de incidentes e suporte a plataformas críticas.
• Participar de decisões de arquitetura e revisões de código.

Conhecimentos

PySpark

AWS

S3

Redshift

Glue

Lambda

Athena

Iceberg

Airflow

SQL

ETL/ELT

Data Lake

Lakehouse

Governança

Ferramentas

Kafka

Terraform

Docker

Kubernetes

Descrição da oferta de emprego

Estamos buscando Engenheiro(a) de Dados AWS Sênior para atuar na construção e evolução de plataformas de dados em nuvem, com foco em Data Lake, Lakehouse, pipelines de alta escala e soluções para Wealth amp; Asset Management.

Principais responsabilidades

• Desenvolver e otimizar pipelines de dados escaláveis utilizando PySpark e AWS.
• Atuar com Amazon Redshift, Apache Iceberg e Apache Airflow.
• Desenvolver soluções de Data Lake/Lakehouse.
• Garantir performance, qualidade, disponibilidade e confiabilidade dos dados.
• Otimizar consultas SQL, jobs Spark e fluxos de processamento.
• Apoiar iniciativas de governança, segurança e compliance.
• Atuar na resolução de incidentes e suporte a plataformas críticas.
• Participar de decisões de arquitetura, revisões de código e evolução da plataforma.

Requisitos obrigatórios e imprescindíveis

• Experiência sólida com PySpark e desenvolvimento de pipelines de dados.
• Forte conhecimento em AWS, especialmente S3, Redshift, Glue, Lambda e Athena.
• Experiência prática com Apache Iceberg em produção.
• Experiência com Apache Airflow para orquestração e monitoramento.
• SQL avançado, incluindo otimização de consultas, performance e modelagem de dados.
• Experiência com ETL/ELT e processamento de grandes volumes de dados.
• Conhecimento em arquiteturas Data Lake, Data Warehouse e Lakehouse.
• Conhecimento em qualidade, governança e monitoramento de dados.

Inglês avançado

Inglês avançado para conversação, com participação em reuniões e discussões técnicas com equipes dos EUA.

Desejável

• Experiência no setor financeiro, Asset Management, Wealth Management, Mercado de Capitais, FinTech ou Investment Banking.
• Conhecimento de Kafka, Terraform, Docker e/ou Kubernetes.
• Experiência com dados de mercado, gestão de portfólio ou soluções de investimentos.
• Conhecimento em arquiteturas de dados em tempo real/streaming.
• Experiência com Infraestrutura como Código (IaC) e automação em nuvem.

Condições

• Remoto
• Contratação: PJ
• Prazo: 12 meses (renováveis)