Senior Data Engineer

Reclame AQUI; Brasil; Teletrabalho; BRL 180 000 - 280 000; Tempo integral

Resumo da oferta

A Reclame AQUI busca Engenheiro(a) de Dados Sênior para atuar no ecossistema de dados na GCP, apoiando a migração para dbt e BigQuery.

Você desenvolverá pipelines, garantirá governança e performance, e trabalhará com Python, Spark, Iceberg e orchestration com Airflow.

Colaborará com times de dados, produto e engenharia para escalabilidade da plataforma e práticas de CI/CD.

Responsabilidades

• Desenvolver, otimizar e manter pipelines de dados em lakehouse na GCP.
• Migrar workloads existentes para dbt + BigQuery, incluindo modelagem, testes e documentação.
• Construir e manter jobs de processamento distribuído com Spark.
• Trabalhar com tabelas Iceberg, garantindo versionamento, evolução de schema e performance de leitura/escrita.
• Escrever código Python de qualidade para orquestração, transformação e automação de dados.
• Orquestrar pipelines utilizando Cloud Composer (Airflow).
• Colaborar com times de dados, produto e engenharia para garantir a confiabilidade e escalabilidade da plataforma.
• Apoiar decisões técnicas relacionadas à arquitetura de dados, incluindo contêinerização de workloads (Kubernetes).
• Definir e aplicar boas práticas de engenharia de dados (CI/CD, testes automatizados, versionamento, observabilidade)

Descrição da oferta de emprego

Buscamos um(a) Engenheiro(a) de Dados Sênior para atuar em nosso ecossistema de dados na GCP, participando ativamente do processo de migração da nossa arquitetura de lakehouse para um modelo baseado em dbt e BigQuery. Você trabalhará na evolução de pipelines, na modernização de práticas de engenharia analítica e na garantia de qualidade, governança e performance dos dados.

Responsabilidades

• Desenvolver, otimizar e manter pipelines de dados em ambiente de lakehouse na GCP
• Atuar na migração de workloads existentes para dbt + BigQuery, incluindo modelagem, testes e documentação
• Construir e manter jobs de processamento distribuído com Spark
• Trabalhar com tabelas Iceberg, garantindo versionamento, evolução de schema e performance de leitura/escrita
• Escrever código Python de qualidade para orquestração, transformação e automação de dados
• Orquestrar pipelines utilizando Cloud Composer (Airflow)
• Colaborar com times de dados, produto e engenharia para garantir a confiabilidade e escalabilidade da plataforma
• Apoiar decisões técnicas relacionadas à arquitetura de dados, incluindo contêinerização de workloads (Kubernetes)
• Definir e aplicar boas práticas de engenharia de dados (CI/CD, testes automatizados, versionamento, observabilidade)