Engenheiro De Dados ( Aws / Terraforms)

buscojobs Brasil; Paraná; Presencial; BRL 20.000 - 80.000; Tempo integral

Resumo da oferta

Uma empresa de tecnologia no Paraná procura profissionais para criar soluções em torno do ciclo de vida dos dados. As responsabilidades incluem criar pipelines de dados, trabalhar com AWS para governança de dados e desenvolvimento em Python. Buscamos candidatos com forte conhecimento em DevOps e experiência com ferramentas como Terraform e Spark. Esta vaga oferece uma oportunidade de impactar a gestão analítica de dados.

Qualificações

• Experiência com AWS, incluindo Lake Formation, EMR Studio e Glue Jobs.
• Conhecimento em ferramentas de DevOps para automação de infraestrutura.
• Experiência no processamento de grandes volumes de dados com Spark.

Responsabilidades

• Criar soluções tecnológicas em torno do ciclo de vida dos dados.
• Disponibilizar dados globais em uma base analítica.
• Criar pipelines de dados utilizando DevOps e Terraform.

Conhecimentos

Programação em Python

AWS

Terraform

Jenkins/GitHub

Spark

Power BI

Descrição da oferta de emprego

Responsabilidades

• Profissionais que criam soluções tecnológicas em torno do ciclo de vida dos dados, passando pelos processos de ingestão, transformação, governança, organização e disponibilização de informações.
• Disponibilizar dados com origem globais (dados externos) numa base analítica para as áreas de negócio e garantir governança e acesso, seguindo as políticas e governanças estabelecidas pelo cliente.
• Realizar criação de pipelines de dados com DevOps, utilizando Terraform e Jenkins / github para automatizar criação de infraestrutura AWS e deploy de soluções
• Auxiliar analistas de dados na classificação de dados pessoais e sensíveis e sua configuração com AWS Lake Formation (permissão de acesso a colunas e linhas)
• Processar grandes volumes de dados com uso do Spark através do EMR Studio e AWS Glue Jobs e Workflow
• Auxiliar analistas de dados na criação de modelos dimensionais para anállise de dados (fatos e dimensões)
• Habilidades de programação em Python
• Relacionamento com a área de negócio para entendimento das origens e mapeamento dos dados
• Estruturação e consolidação de dados e indicadores na AWS, garantindo bases com os templates adequados para o consumo direto em ferramentas de PowerBi para construção de dashboards;

Qualificações

• Habilidades de programação em Python
• Experiência com AWS (incluindo Lake Formation, EMR Studio, AWS Glue Jobs) e ferramentas de DevOps
• Conhecimento em Terraform e Jenkins/GitHub para automação de infraestrutura e deploy
• Experiência com Spark para processamento de grandes volumes de dados
• Capacidade de estruturar dados e modelos dimensionais (fatos e dimensões) para análises
• Conhecimento de Power BI para consumo de dados e construção de dashboards
• Habilidade de relacionamento com áreas de negócio para entendimento de origens e mapeamento de dados