AWS Data Engineer

mazzatech; Brasil; Teletrabalho; BRL 120 000 - 190 000; Tempo integral

Resumo da oferta

A Mazzatech busca um(a) Engenheiro(a) de Dados AWS para desenvolver e implementar soluções de dados na nuvem. O profissional projetará, desenvolverá e implementará pipelines usando Glue, Spark e Redshift, trabalhando em colaboração com engenheiros e cientistas de dados para traduzir requisitos em soluções confiáveis.

O papel envolve construir ETLs robustos, otimizar fluxos de processamento em Spark e modelar dados no Redshift, assegurando qualidade e integridade para relatórios e análises.

Qualificações

• Experiência prática com design de pipelines de dados.
• Conhecimento sólido de consultas SQL e modelagem de dados.
• Capacidade de traduzir requisitos de negócios em soluções de dados.

Responsabilidades

• Projetar, desenvolver e implementar soluções de dados na AWS utilizando Glue, Spark e Redshift.
• Colaborar com engenheiros e cientistas de dados para entender requisitos e traduzi-los em pipelines escaláveis.
• Criar e gerenciar ETL usando AWS Glue para extrair, transformar e carregar dados de várias fontes.
• Otimizar fluxos de processamento de dados no Apache Spark para manuseio e análise eficientes.
• Desenvolver e manter modelos e esquemas de dados no Amazon Redshift para suporte a relatórios.
• Monitorar e solucionar problemas em pipelines para garantir qualidade e integridade dos dados.
• Documentar processos de dados e arquitetura para compartilhamento de conhecimento e conformidade.

Conhecimentos

ETL design

SQL

Data modeling

Ferramentas

AWS Glue

Apache Spark

Amazon Redshift

Descrição da oferta de emprego

A Mazzatech está em busca de um(a) Engenheiro(a) de Dados AWS para atuar no desenvolvimento e implementação de soluções de dados na nuvem. O profissional será responsável por projetar, desenvolver e implementar soluções de dados na AWS utilizando Glue, Spark e Redshift, colaborando com engenheiros e cientistas de dados para traduzir requisitos em pipelines de dados escaláveis.

Responsabilidades

• Projetar, desenvolver e implementar soluções de dados na AWS utilizando Glue, Spark e Redshift.
• Colaborar com engenheiros de dados e cientistas de dados para entender os requisitos de dados e traduzi-los em pipelines de dados escaláveis.
• Criar e gerenciar processos ETL usando AWS Glue para extrair, transformar e carregar dados de várias fontes.
• Otimizar fluxos de trabalho de processamento de dados no Apache Spark para garantir um manuseio e análise de dados eficientes.
• Desenvolver e manter modelos e esquemas de dados no Amazon Redshift para suportar relatórios e análises.
• Monitorar e solucionar problemas em pipelines de dados para garantir a qualidade e integridade dos dados.
• Documentar processos de dados, arquitetura e melhores práticas para compartilhamento de conhecimento e conformidade.