Engenheiro De Dados ( Aws / Terraforms)

buscojobs Brasil; Amapá; Híbrido; BRL 20.000 - 80.000; Tempo integral

Resumo da oferta

Uma empresa de tecnologia no Brasil procura profissionais que criem soluções para o ciclo de vida dos dados. As responsabilidades incluem automatização de infraestrutura na AWS, criação de pipelines usando DevOps e apoio na classificação de dados. Conhecimentos em Python e ferramentas como Terraform e Jenkins são essenciais. A vaga requer habilidades na estruturação de dados para análise e construção de dashboards em PowerBi.

Qualificações

• Experiência em criação de pipelines de dados.
• Habilidades em governança e acesso a dados.
• Conhecimento em classificação de dados pessoais e sensíveis.

Responsabilidades

• Criar soluções tecnológicas para ciclo de vida dos dados.
• Automatizar a criação de infraestrutura AWS.
• Auxiliar na criação de modelos dimensionais para análise de dados.

Conhecimentos

Criação de soluções tecnológicas

Programação em Python

Uso de Terraform

Experiência com AWS

Habilidades em DevOps

Processamento de grandes volumes de dados com Spark

Ferramentas

AWS

Jenkins

PowerBi

Descrição da oferta de emprego

Responsibilities

• Profissionais que criam soluções tecnológicas em torno do ciclo de vida dos dados, passando pelos processos de ingestão, transformação, governança, organização e disponibilização de informações.
• Disponibilizar dados com origem globais (dados externos) numa base analítica para as áreas de negócio e garantir governança e acesso, seguindo as políticas e governanças estabelecidas pelo cliente.
• Realizar criação de pipelines de dados com DevOps, utilizando Terraform e Jenkins / github para automatizar criação de infraestrutura AWS e deploy de soluções
• Auxiliar analistas de dados na classificação de dados pessoais e sensíveis e sua configuração com AWS Lake Formation (permissão de acesso a colunas e linhas)
• Processar grandes volumes de dados com uso do Spark através do EMR Studio e AWS Glue Jobs e Workflow
• Auxiliar analistas de dados na criação de modelos dimensionais para anállise de dados (fatos e dimensões)
• Habilidades de programação em Python
• Relacionamento com a área de negócio para entendimento das origens e mapeamento dos dados
• Estruturação e consolidação de dados e indicadores na AWS, garantindo bases com os templates adequados para o consumo direto em ferramentas de PowerBi para construção de dashboards;