Data Engineer Sênior

GFT Group; Barueri; Presencial; BRL 80.000 - 120.000; Tempo integral

Resumo da oferta

Uma empresa de tecnologia em Barueri busca um Engenheiro de Dados experiente para projetar e manter pipelines escaláveis e resilientes. O candidato ideal deve ter conhecimento profundo em Apache Spark e Scala, além de experiência com serviços da AWS. As responsabilidades incluem garantir a qualidade e governança dos dados, além de colaborar com equipes diversas. Valorizamos profissionais que são colaborativos, criativos e que se destacam em resolução de problemas. Venha fazer parte da nossa equipe!

Qualificações

• Experiência em ambientes distribuídos com engenharia de dados.
• Domínio em Apache Spark e Scala.
• Experiência com serviços AWS como Glue, S3 e Redshift.

Responsabilidades

• Projetar e manter pipelines de dados escaláveis.
• Trabalhar com dados estruturados e não estruturados.
• Garantir a governança e qualidade dos dados.

Conhecimentos

Engenharia de Dados

Apache Spark

Scala

AWS

Governança de Dados

Colaboração em equipe

Resolução de Problemas

Ferramentas

AWS Glue

Apache Kafka

CI/CD para dados

Descrição da oferta de emprego

O que buscamos

Profissional de Engenharia de Dados com experiência em ambientes distribuídos, atuando na construção de pipelines escaláveis e resilientes. Buscamos alguém com domínio em Spark, Scala e AWS, capaz de apoiar decisões de arquitetura e garantir qualidade e governança dos dados.

Responsabilidades

• Projetar, construir e manter pipelines de dados escaláveis e resilientes;
• Trabalhar com grandes volumes de dados estruturados e não estruturados;
• Garantir qualidade, consistência e governança dos dados;
• Colaborar com engenheiros de software, analistas e cientistas de dados;
• Participar de decisões técnicas sobre arquitetura de dados e ferramentas.

Requisitos e Qualificações

• Experiência com engenharia de dados em ambientes distribuídos;
• Conhecimento em Apache Spark e Scala;
• Experiência com AWS (Glue, S3, EMR, Athena, Redshift etc.);
• Conhecimento em modelagem de dados, ETL/ELT e pipelines de dados;
• Familiaridade com bancos de dados relacionais e NoSQL;
• Experiência com processamento em batch e streaming;
• Conhecimento em Data Lake, Lakehouse Architecture, DataOps, processamento orientado a eventos e boas práticas de governança de dados.

Requisitos Diferenciais

• Experiência com Apache Kafka ou Amazon MSK;
• Conhecimento em modernização de sistemas legados;
• Experiência com Delta Lake, Apache Hudi ou Iceberg;
• Familiaridade com CI/CD para dados (dbt, Airflow, Terraform);

Descrição comportamental

Procuramos uma pessoa que:

• Goste de trabalhar em equipe e seja colaborativa em suas atribuições;
• Tenha coragem para se desafiar e ir além, abraçando novas oportunidades de crescimento;
• Transforme ideias em soluções criativas e busque qualidade em toda sua rotina;
• Tenha habilidades de resolução de problemas;
• Possua habilidade e se sinta confortável para trabalhar de forma independente e gerenciar o próprio tempo;
• Tenha interesse em lidar com situações adversas e inovadoras no âmbito tecnológico.

Big enough to deliver – small enough to care.

#VempraGFT

#VamosVoarJuntos

#ProudToBeGFT