Developer Data Engineer Sr Aws (Tssm / #00070) - 10609383

Decision Group; São Paulo; Teletrabalho; BRL 180 000 - 300 000; Tempo integral

Resumo da oferta

A Decision Group busca um Desenvolvedor SRE de Dados Sênior com atuação em AWS para projetar plataformas de dados escaláveis e confiáveis. O profissional irá liderar a construção de pipelines, ETL/ELT, e modelagem de dados, trabalhando remotamente no Brasil com foco em São Paulo.

O candidato ideal possui experiência com Spark, PySpark, SQL, Python e ferramentas de qualidade de dados, além de Agile (Scrum/SAFE) e boa comunicação em inglês.

Qualificações

• Experiência com plataformas de dados na AWS (Glue, Lambda, Redshift, RDS, Step Functions, DynamoDB, S3).
• Domínio de Spark, PySpark e SQL para processamento de dados.
• Modelagem e arquitetura de dados: data warehouse, data lake e pipelines de dados.
• Programação em Python e frameworks de qualidade de dados como SODA e Great Expectations.
• Gestão de projetos com Agile (Scrum/SAFE); Jira e Confluence.
• Inglês avançado e excelente comunicação, capacidade de resolver problemas.

Responsabilidades

• Projetar e implementar plataformas de dados escaláveis, seguras e eficientes.
• Projetar, construir e manter processos ETL/ELT.
• Projetar e otimizar modelos de dados complexos.
• Solucionar problemas complexos de dados e liderar análises de causa raiz.

Ferramentas

AWS Glue

AWS Lambda

Amazon Redshift

AWS RDS

Step Functions

DynamoDB

S3

Spark

PySpark

SQL

Python

SODA

Great Expectations

Jira

Confluence

Descrição da oferta de emprego

Developer Data Engineer SR AWS (TSSM / #00070) - 10609383 • São Paulo, SP

remoteBrazil > 4 Years

Requisitos obrigatórios

• Experiência com plataformas de nuvem para dados na AWS: Glue, Lambda, Redshift, RDS, Step Functions, DynamoDB, S3;
• Frameworks de processamento de dados: Spark, PySpark e SQL;
• Modelagem e arquitetura de dados: Data warehouse, Data lake, Data pipelines;
• Programação em Python; Frameworks de qualidade de dados: SODA, Great Expectations;
• Gestão de projetos: Agile (Scrum, SAFE), Jira, Confluence;
• Inglês avançado. Excelentes habilidades de comunicação, mentalidade voltada para a resolução de problemas e espírito colaborativo.

Requisitos desejáveis

• CI/CD: Terraform, Jenkins. Experiência com outros provedores de nuvem (Azure, GCP). Espanhol.

Responsabilidades

• Projetar e implementar plataformas de dados escaláveis, seguras e eficientes.
• Projetar, construir e manter processos ETL/ELT.
• Projetar e otimizar modelos de dados complexos.
• Solucionar problemas complexos de dados e liderar análises de causa raiz.