Engenharia De Dados Sênior (Aws) Híbrido/Sp - Sp

Gft Brasil; Barueri; On-site; BRL 180,000 - 300,000; Full time

Job summary

Gft Brasil busca um Engenheiro de Dados Sênior para conceber e evoluir plataformas analíticas em ambientes corporativos regulados. O profissional atuará na definição da arquitetura de dados, pipelines com Airflow, modelagem com dbt e governança, com foco em performance e redução de custos.

Com atuação prática na implementação, será referência técnica, mentorando o time. Requisitos incluem SQL avançado, Python, Airflow, dbt, AWS/Redshift e Snowflake. A vaga é em Barueri, com atuação presencial.

Qualifications

• Experiência sólida em Engenharia de Dados e atuação arquitetural em plataformas de dados.
• Experiência em ambientes analíticos em produção, com foco em governança e segurança.
• SQL avançado (CTEs, Window Functions, planos de execução) e otimização de consultas.
• Python aplicado à Engenharia de Dados; Airflow em produção.
• dbt ou ferramenta equivalente de transformação de dados; Git e CI/CD.
• Modelagem dimensional (Kimball) e Data Warehouse MPP na nuvem (Redshift/Snowflake/BG/Databricks).
• Conhecimento em qualidade, rastreabilidade e observabilidade de dados; LGPD e conformidade.
• Capacidade de atuar com autonomia, visão arquitetural e boa comunicação técnica.

Responsibilities

• Definir e evoluir a arquitetura de dados com modelos hub-spoke e dados vetorizados.
• Desenhar, desenvolver e manter pipelines de dados com Airflow e dbt.
• Realizar ingestão de dados de bancos, APIs, arquivos regulatórios e sistemas corporativos.
• Tratar transformação de dados, testes, documentação e governança.
• Estudar estratégias de particionamento, distribuição e ordenação em ambientes MPP.
• Otimizar performance, tuning de consultas e gestão de custos da plataforma de dados.
• Garantir governança, qualidade, rastreabilidade e observabilidade dos dados.
• Mentorar a equipe, revisar código e promover boas práticas de engenharia.

Skills

SQL avançado

Python para engenharia de dados

Arquitetura de dados

Data Lake/Data Warehouse

Governança de dados

Observabilidade de dados

Otimização de custos

Modelagem dimensional (Kimball)

Data Warehouse MPP (nuvem)

Qualidade de dados

Autonomia/visão arquitetural

Tools

Apache Airflow

dbt

Git

CI/CD

Terraform

Snowflake

Amazon Redshift

BigQuery

Databricks

Apache Iceberg/Delta Lake

Kafka/Debezium/Kinesis

Job description

O que buscamos: Buscamos um(a) Engenheiro(a) de Dados Sênior com forte atuação em arquitetura de dados, responsável por projetar, construir e evoluir plataformas analíticas em ambientes corporativos regulados. Procuramos profissionais com experiência em modelagem de dados, Data Lake, Data Warehouse, governança, performance, qualidade e otimização de custos, combinando visão arquitetural com atuação prática na implementação de soluções. Responsabilidades: Atuar na definição e evolução da arquitetura de dados utilizando modelos hub-spoke e estruturas voltadas para dados vetorizados. Projetar, desenvolver e sustentar pipelines de dados utilizando Apache Airflow. Implementar processos de ingestão de dados provenientes de bancos de dados, APIs, arquivos regulatórios e sistemas corporativos. Desenvolver modelos de transformação utilizando dbt, incluindo testes, documentação e governança. Definir estratégias de modelagem, granularidade, historização e gestão do ciclo de vida dos dados. Estruturar camadas de dados, contratos de consumo e fontes oficiais para plataformas analíticas e BI. Definir padrões de distribuição, ordenação e particionamento em ambientes MPP. Realizar otimização de performance, tuning de consultas e gestão de custos da plataforma de dados. Implementar controles de qualidade, reconciliação e rastreabilidade dos dados. Garantir aderência às políticas de governança, segurança, LGPD e requisitos regulatórios. Documentar decisões arquiteturais, padrões técnicos e boas práticas de engenharia. Atuar como referência técnica, realizando mentoria e code reviews para o time. Requisitos Obrigatórios: Experiência sólida em Engenharia de Dados. Experiência com responsabilidade arquitetural em plataformas de dados. Vivência com plataformas analíticas em produção. Conhecimento avançado de SQL, incluindo CTEs, Window Functions, planos de execução e otimização de consultas. Experiência com Python aplicado à Engenharia de Dados. Experiência com Apache Airflow em ambiente produtivo. Experiência com dbt ou ferramentas equivalentes de transformação de dados. Conhecimento em Git e práticas de CI/CD. Experiência com modelagem dimensional (Kimball). Experiência com Data Warehouse MPP em nuvem, preferencialmente Amazon Redshift. Conhecimento em Snowflake, BigQuery ou Databricks. Experiência em Data Lake, arquitetura analítica e governança de dados. Conhecimento em qualidade, rastreabilidade e Observabilidade de dados. Vivência em ambientes regulados, com foco em conformidade e segurança da informação. Capacidade de atuação com autonomia, visão arquitetural e comunicação técnica clara. Requisitos Diferenciais: Experiência no mercado financeiro. Vivência com dados regulatórios e requisitos de órgãos como CVM, BACEN e BSM. Conhecimento em AWS e Infrastructure as Code utilizando Terraform. Experiência com arquiteturas Lakehouse. Conhecimento em Apache Iceberg ou Delta Lake. Experiência com Kafka, Debezium ou Kinesis. Vivência com ferramentas de qualidade de dados, catálogo de dados e BI. Experiência em projetos de migração de plataformas com validação de paridade de dados. Big enough to deliver small enough to care. #VempraGFT #VamosVoarJuntos #ProudToBeGFT.

Formação Acadêmica:

Não informado

Salário:

A combinar

Cargo:

Outros

Empresa:

Gft Brasil

Serviços de TI.

Ramo:

Informática/ Tecnologia

(EB)