Engenheiro de Dados (Pleno ou Senior) (44876)

Ewave do Brasil Informática Ltda.; Curitiba; Presencial; BRL 60.000 - 100.000; Tempo integral

Resumo da oferta

Uma empresa líder no setor ferroviário brasileiro busca um profissional dinâmico para desenvolver soluções tecnológicas voltadas para o ciclo de vida dos dados. Nesta função, você terá a oportunidade de trabalhar com grandes volumes de dados, utilizando ferramentas como AWS, Airflow, e Spark, garantindo a governança e a organização das informações. O trabalho envolve colaboração com analistas e cientistas de dados, criando pipelines e automatizando processos com DevOps. Se você é apaixonado por dados e tecnologia, esta é uma chance incrível de impactar positivamente a logística e o transporte no Brasil.

Serviços

Plano de Saúde

Qualificações

• Experiência em criação de soluções em torno do ciclo de vida dos dados.
• Conhecimento em governança de dados e ferramentas como Airflow e AWS.

Responsabilidades

• Criar soluções tecnológicas para o ciclo de vida dos dados.
• Automatizar infraestrutura AWS com Terraform e Jenkins.

Conhecimentos

Desenvolvimento de soluções tecnológicas

Governança de dados

Automação de infraestrutura

Processamento de grandes volumes de dados

MLOps

Formação académica

Ensino Superior Completo

Ferramentas

AWS

Airflow

Terraform

Jenkins

Spark

AWS Glue

Descrição da oferta de emprego

Nosso cliente é a maior operadora de ferrovias do Brasil e oferece serviços logísticos de transporte ferroviário, elevação portuária e armazenagem. A companhia opera 12 terminais de transbordo, 6 terminais portuários e administra cerca de 14 mil quilômetros de ferrovias nos estados de Paraná, Santa Catarina, Rio Grande do Sul, São Paulo, Mato Grosso do Sul, Mato Grosso, Minas Gerais, Goiás e Tocantins. A base de ativos é formada por 1.200 locomotivas e 33 mil vagões.

Responsabilidades:

1. Profissionais que criam soluções tecnológicas em torno do ciclo de vida dos dados, passando pelos processos de ingestão, transformação, governança, organização e disponibilização de informações.
2. Disponibilizar dados com origem globais (dados externos) numa base analítica para as áreas de negócio e garantir governança e acesso, seguindo as políticas e governanças estabelecidas pela Rumo com uso do Airflow.
3. Realizar criação de pipelines de dados com DevOps, utilizando Terraform e Jenkins para automatizar criação de infraestrutura AWS e deploy de soluções.
4. Auxiliar analistas de dados na classificação de dados pessoais e sensíveis e sua configuração com AWS Lake Formation (permissão de acesso a colunas e linhas).
5. Processar grandes volumes de dados com uso do Spark através do EMR Studio e AWS Glue Jobs e Workflow.
6. Auxiliar analistas de dados na criação de modelos dimensionais para análise de dados (fatos e dimensões).
7. Auxiliar cientistas de dados em esteiras MLOps.

Requisitos:

Escolaridade mínima: Ensino Superior - Concluído

Observações:

• Plano de Saúde