Engenharia de Dados Sênior

Gft Brasil; Barueri; Presencial; BRL 150 000 - 240 000; Tempo integral

Resumo da oferta

A Gft Brasil procura um Engenheiro de Dados para atuar na construção e evolução de plataformas de dados escaláveis. Você desenvolverá soluções de ingestão, transformação e disponibilização de dados com alta performance, mantendo governança e confiabilidade.

O profissional trabalhará com pipelines de dados, processamento batch e streaming, colaborando com equipes de software, analistas, cientistas de dados e stakeholders de negócio. Experiência com Spark, Scala e serviços AWS é essencial.

Qualificações

• Experiência sólida com Engenharia de Dados em ambientes distribuídos.
• Conhecimento avançado de Apache Spark e Scala.
• Experiência com serviços AWS (Glue, S3, EMR, Athena, Redshift).
• Conhecimento de modelagem de dados, ETL/ELT e pipelines de dados.

Responsabilidades

• Projetar, construir e manter pipelines de dados escaláveis e de alta performance.
• Trabalhar com grandes volumes de dados estruturados e não estruturados.
• Garantir qualidade, consistência e governança dos dados ao longo do ciclo de vida.
• Desenvolver processos de ingestão, transformação e disponibilização de dados.
• Colaborar com engenheiros de software, analistas, cientistas de dados e stakeholders.
• Participar da definição de arquiteturas de dados e avaliação de novas tecnologias.
• Monitorar e otimizar pipelines em ambientes distribuídos.
• Apoiar iniciativas de modernização da plataforma de dados.

Conhecimentos

Spark

Scala

AWS

ETL/ELT

Data pipelines

Governança de dados

Git

NoSQL

Ferramentas

Delta Lake

Apache Kafka

Amazon MSK

dbt

Airflow

Terraform

Descrição da oferta de emprego

O que buscamos: Buscamos um(a) Engenheiro(a) de Dados para atuar na construção e evolução de plataformas de dados escaláveis, apoiando iniciativas analíticas e estratégicas. O profissional será responsável por desenvolver soluções robustas para ingestão, processamento e disponibilização de dados, garantindo alta performance, governança e confiabilidade dos ambientes de dados.

Responsabilidades:

• Projetar, construir e manter pipelines de dados escaláveis, resilientes e de alta performance.
• Trabalhar com grandes volumes de dados estruturados e não estruturados.
• Garantir a qualidade, consistência e governança dos dados ao longo de todo o ciclo de vida.
• Desenvolver processos de ingestão, transformação e disponibilização de dados.
• Colaborar com engenheiros de software, analistas de dados, cientistas de dados e stakeholders de negócio.
• Participar da definição de arquiteturas de dados e da avaliação de novas tecnologias e ferramentas.
• Monitorar e otimizar processos de processamento de dados em ambientes distribuídos.
• Apoiar iniciativas de modernização e evolução da plataforma de dados.

Requisitos e Qualificações:

• Experiência sólida com Engenharia de Dados em ambientes distribuídos.
• Conhecimento avançado de Apache Spark e Scala.
• Experiência com serviços AWS, como Glue, S3, EMR, Athena e Redshift.
• Conhecimento em modelagem de dados, ETL/ELT e construção de pipelines de dados.
• Familiaridade com bancos de dados relacionais e NoSQL.
• Experiência com processamento de dados em batch e streaming.
• Conhecimento de boas práticas de qualidade, segurança e governança de dados.
• Experiência com versionamento de código utilizando Git.

Diferenciais:

• Experiência com Apache Kafka ou Amazon MSK.
• Conhecimento em modernização de sistemas legados.
• Experiência com Delta Lake, Apache Hudi ou Apache Iceberg.
• Familiaridade com ferramentas de DataOps e CI/CD para dados, como dbt, Airflow e Terraform.
• Experiência com arquiteturas Lakehouse.
• Vivência em ambientes de alta volumetria de dados.
• Conhecimento em observabilidade e monitoramento de pipelines de dados.

Descrição comportamental:

• Procuramos uma pessoa que:
• Goste de trabalhar em equipe e seja colaborativa em suas atribuições.
• Tenha coragem para se desafiar e ir além, abraçando novas oportunidades de crescimento.
• Transforme ideias em soluções criativas e busque qualidade em toda sua rotina.
• Tenha habilidades de resolução de problemas.
• Possua habilidade e se sinta confortável para trabalhar de forma independente e gerenciar o próprio tempo.
• Tenha interesse em lidar com situações adversas e inovadoras no âmbito tecnológico.

Big enough to deliver - small enough to care. #VempraGFT #LetsGoBeyond #ProudToBeGFT.