Engenheiro De Dados ( Aws / Terraforms)

buscojobs Brasil; Espírito Santo; Presencial; BRL 20.000 - 80.000; Tempo integral

Resumo da oferta

Uma empresa de tecnologia em dados está buscando profissionais que criem soluções tecnológicas em torno do ciclo de vida dos dados. Este papel requer habilidades em programação em Python e DevOps, e envolve o processamento de grandes volumes de dados na AWS. O candidato ideal terá experiência com criação de pipelines de dados e governança de dados.

Qualificações

• Experiência em criar soluções tecnológicas em torno do ciclo de vida dos dados.
• Capacidade de trabalhar com DevOps e AWS.
• Habilidade com processamento de grandes volumes de dados usando Spark.

Responsabilidades

• Criar soluções para ingestão e transformação de dados.
• Disponibilizar dados analíticos e garantir governança.
• Automatizar criação de infraestrutura na AWS com Terraform e Jenkins.

Conhecimentos

Programação em Python

Descrição da oferta de emprego

Responsibilities

• Profissionais que criam soluções tecnológicas em torno do ciclo de vida dos dados, passando pelos processos de ingestão, transformação, governança, organização e disponibilização de informações.
• Disponibilizar dados com origem globais (dados externos) numa base analítica para as áreas de negócio e garantir governança e acesso, seguindo as políticas e governanças estabelecidas pelo cliente.
• Realizar criação de pipelines de dados com DevOps, utilizando Terraform e Jenkins / github para automatizar criação de infraestrutura AWS e deploy de soluções
• Auxiliar analistas de dados na classificação de dados pessoais e sensíveis e sua configuração com AWS Lake Formation (permissão de acesso a colunas e linhas)
• Processar grandes volumes de dados com uso do Spark através do EMR Studio e AWS Glue Jobs e Workflow
• Auxiliar analistas de dados na criação de modelos dimensionais para anállise de dados (fatos e dimensões)
• Habilidades de programação em Python
• Relacionamento com a área de negócio para entendimento das origens e mapeamento dos dados
• Estruturação e consolidação de dados e indicadores na AWS, garantindo bases com os templates adequados para o consumo direto em ferramentas de PowerBi para construção de dashboards;

Qualifications

• Habilidades de programação em Python