Engenheiro De Dados ( Aws / Terraforms)

buscojobs Brasil; Alagoas; Presencial; BRL 20.000 - 80.000; Tempo integral

Resumo da oferta

Uma empresa de tecnologia especializada em dados está em busca de um profissional que atue na criação de soluções tecnológicas relacionadas ao ciclo de vida dos dados. O candidato ideal deve ter experiência em programação Python, DevOps e AWS, além de ser capaz de estruturar e consolidar dados para ferramentas como Power BI. O trabalho envolve colaboração com analistas de dados e o manuseio de grandes volumes de informações.

Qualificações

• Experiência com criação de pipelines de dados utilizando DevOps.
• Conhecimento em AWS Lake Formation para gerenciamento de dados sensíveis.
• Capacidade de processar grandes volumes de dados com Spark.

Responsabilidades

• Criar soluções tecnológicas para ciclo de vida dos dados.
• Disponibilizar dados globais para áreas de negócio.
• Auxiliar analistas de dados na classificação e configuração de dados.

Conhecimentos

Programação em Python

DevOps

AWS

Governança de dados

Power BI

Ferramentas

Terraform

Jenkins

Spark

AWS Glue

Descrição da oferta de emprego

Descrição das responsabilidades e qualificações:

Responsibilities

• Profissionais que criam soluções tecnológicas em torno do ciclo de vida dos dados, passando pelos processos de ingestão, transformação, governança, organização e disponibilização de informações.
• Disponibilizar dados com origem globais (dados externos) numa base analítica para as áreas de negócio e garantir governança e acesso, seguindo as políticas e governanças estabelecidas pelo cliente.
• Realizar criação de pipelines de dados com DevOps, utilizando Terraform e Jenkins / github para automatizar criação de infraestrutura AWS e deploy de soluções
• Auxiliar analistas de dados na classificação de dados pessoais e sensíveis e sua configuração com AWS Lake Formation (permissão de acesso a colunas e linhas)
• Processar grandes volumes de dados com uso do Spark através do EMR Studio e AWS Glue Jobs e Workflow
• Auxiliar analistas de dados na criação de modelos dimensionais para anállise de dados (fatos e dimensões)
• Habilidades de programação em Python
• Relacionamento com a área de negócio para entendimento das origens e mapeamento dos dados
• Estruturação e consolidação de dados e indicadores na AWS, garantindo bases com os templates adequados para o consumo direto em ferramentas de PowerBi para construção de dashboards;

Qualifications

• Habilidades de programação em Python
• Auxiliar analistas de dados na classificação de dados pessoais e sensíveis e sua configuração com AWS Lake Formation (permissão de acesso a colunas e linhas)
• Experiência com AWS, EMR Studio e AWS Glue Jobs e Workflow
• Conhecimento de governança de dados e políticas de governança aplicáveis
• Relacionamento com a área de negócio para entendimento das origens e mapeamento dos dados
• Capacidade de estruturar e consolidar dados e indicadores para consumo em ferramentas como Power BI