Analista de Dados - 126939

GFT Group; Barueri; Presencial; BRL 80.000 - 120.000; Tempo integral

Resumo da oferta

Uma empresa de tecnologia está em busca de um profissional para atuar em Engenharia de Dados, responsável por otimizar processos de ETL e colaborar na arquitetura de dados. O candidato ideal deve ter experiência com AWS, Hadoop e ferramentas DevOps, além de habilidades em Python e um bom nível de inglês. A posição valoriza trabalho em equipe e resolução criativa de problemas.

Qualificações

• Conhecimento e aplicação das melhores práticas de uso de dados.
• Habilidade em trabalho colaborativo e resolução de problemas.
• Capacidade de gerenciar tempo de forma independente.

Responsabilidades

• Interagir com terceiros e fornecedores para entendimento e implementação de dados.
• Participar de discussões baseadas em dados e apoiar decisões.
• Otimizar processos de ETL e colaborar na arquitetura de dados.
• Desenvolver APIs para consumo de dados.

Conhecimentos

Jobs Spark Scala

Apache Airflow

Python

Hadoop Ecosystem (Yarn, Hive, HDFS)

Amazon AWS (EC2, S3, EMR)

Cultura DevOps

Cassandra / Mongo DB

Inglês intermediário/avançado

Ferramentas

Kubernetes

Docker

Terraform

Ansible

Apache Hudi

Iceberg

Cassandra

Trino (Presto)

HBase

Delta Lake

Técnicas de CDC

Change Data Capture

Descrição da oferta de emprego

O que buscamos

Profissional que atue com Engenharia de Dados;

Responsabilidades

• Interagir com terceiros, fornecedores e/ou prestadores a fim de garantir o melhor entendimento e implementação dos dados e arquitetura;
• Participar de discussões baseadas em dados dentro da equipe e entre áreas de negócios, apoiando decisões importantes;
• Fazer a interface com os times de tecnologia e produtos a fim de definir as melhores práticas quanto ao armazenamento e consumo dos dados, além de sugerir, testar e acompanhar a implementação de novas tecnologias;
• Vai ser ponto de contato, provendo soluções que sejam disponibilizadas para consumo conforme a necessidade de cada tipo de usuário;
• Contribuir em projetos de migração de dados entre plataformas (MF x Hadoop);
• Otimizar processos de ETL;
• Colaborar no desenho de arquiteturas para processamento de dados, seja para novos pipelines ou para melhoria do atual;
• Aplicar os padrões de governança de dados estabelecidos pela empresa;
• Garantir que arquitetura comporte necessidades e requisitos técnicos do time de execução, trabalhando em conjunto com times de TI (Arquitetura, Segurança, Infraestrutura) e com áreas de negócio;
• Desenvolver APIs de acesso e consumo dos dados para disponibilização dos dados como um produto;
• Identificar oportunidades e realizar estruturação de dados para uso em diversas áreas da empresa

Requisitos e qualificações

• Jobs Spark Scala;
• Apache Airflow;
• Python;
• Hadoop Ecosystem (Yarn, Hive, HDFS);
• Amazon AWS (EC2, S3, EMR);
• Cultura DevOps; Cassandra / Mongo DB;
• Inglês intermediário/avançado;
• Ter conhecimento e garantir que está sendo aplicado as melhores práticas de uso de dados;

Desejável

• Conhecimento em: Esteira de DevOps Jenkins Sonarcube/Veracode PEP8;
• Kubernetes / Docker - Terraform / Ansible - Apache Hudi / Iceberg - Cassandra - Trino (Presto);
• HBase - Delta Lake - Técnicas de CDC - Change Data Capture.

Descrição comportamental

Procuramos uma pessoa que:

• Goste de trabalhar em equipe e seja colaborativa em suas atribuições;
• Tenha coragem para se desafiar e ir além, abraçando novas oportunidades de crescimento;
• Transforme ideias em soluções criativas e busque qualidade em toda sua rotina;
• Tenha habilidades de resolução de problemas;
• Possua habilidade e se sinta confortável para trabalhar de forma independente e gerenciar o próprio tempo;
• Tenha interesse em lidar com situações adversas e inovadoras no âmbito tecnológico.

Big enough to deliver – small enough to care.

#VempraGFT

#VamosVoarJuntos

#ProudToBeGFT