Engenheiro de dados

Compass UOL; Brasil; Presencial; BRL 120 000 - 230 000; Tempo integral

Resumo da oferta

A Compass UOL busca um profissional de Analytics Engineering no Brasil para atuar na camada de dados. Você mapeará consumidores do DW legado, classificando por domínio e criticidade, e modelará os marts de consumo por domínio na camada gold, seguindo o template medalhão e os contratos de dados.

SERá responsável pelo reapontamento de dashboards e recursos, validar a paridade entre legado e gold, suportar o cutover por domínio e colaborar com o Product Owner e o Arquiteto de Dados para priorizar

Qualificações

• Experiência sólida em camada de consumo — modelagem dimensional/marts, camada semântica e métricas certificadas.
• Databricks: Spark SQL em produção, Delta Lake e arquitetura medalhão (bronze, silver, gold).
• Reapontamento de BI: troca de fontes, refatoração de datasets e validação de paridade de números.
• Integrações sistêmicas de dados: APIs, extrações batch e cargas entre sistemas, incluindo contratos de interface e planos de rollback.
• SQL avançado: técnicas de reconciliação e comparação de bases em escala.
• Modelagem dimensional (Kimball/star schema) e boas práticas de marts por domínio.
• Data Contracts e Data Quality (expectations, DQ gates) aplicados à camada de consumo.

Responsabilidades

• Mapear e inventariar os consumidores do DW legado (BI, relatórios e integrações) por domínio e criticidade.
• Modelar os marts de consumo por domínio na camada gold, derivados da silver, seguindo o template medalhão e os contratos de dados.
• Executar o reapontamento de dashboards, relatórios e integrações para a camada gold wave a wave, com cutover por domínio.
• Validar a paridade de consumo entre legado e gold e apoiar a desativação de pontos legados.
• Contribuir com a priorização das waves junto ao Product Owner e ao Arquiteto de Dados.

Conhecimentos

Analytics Engineering

SQL avançado

Dimensional modeling

Data Contracts

Data Quality

Python

PySpark

Ferramentas

Databricks

Power BI

Tableau

DataStage

Descrição da oferta de emprego

Responsabilidades e atribuições

• Mapear e inventariar os consumidores do DW legado (BI, relatórios, aplicações e integrações sistêmicas), classificando por domínio e criticidade;
• Modelar os marts de consumo por domínio na camada gold, derivados da silver, seguindo o template medalhão e os contratos de dados;
• Executar o reapontamento de dashboards, relatórios, aplicações e integrações sistêmicas para a gold, wave a wave, coordenado com o cutover por domínio;
• Validar a paridade de consumo entre legado e gold e suportar a desativação dos pontos de consumo legados;
• Contribuir com a priorização das waves junto ao Product Owner e ao Arquiteto de Dados.

Requisitos e qualificações

• Analytics Engineering: experiência sólida em camada de consumo — modelagem dimensional/marts, camada semântica e métricas certificadas;
• Databricks: Spark SQL em produção, Delta Lake e arquitetura medalhão (bronze, silver, gold);
• Reapontamento de BI (Power BI, Tableau ou similar): troca de fontes, refatoração de datasets e validação de paridade de números;
• Integrações sistêmicas de dados: APIs, extrações batch e cargas entre sistemas, incluindo contratos de interface e planos de rollback;
• SQL avançado: técnicas de reconciliação e comparação de bases em escala;
• Modelagem dimensional (Kimball/star schema) e boas práticas de marts por domínio;
• Data Contracts e Data Quality (expectations, DQ gates) aplicados à camada de consumo;

Requisitos Desejáveis

• Experiência em migração de DW com coexistência legado/novo, cutover por ondas e reconciliação de bases em volume — diferencial importante;
• Unity Catalog (lineage, descoberta e documentação de métricas e modelos de consumo);
• Python e PySpark para automação de validações de paridade e rotinas de reapontamento;
• Conhecimento de DataStage ou outras ferramentas ETL legadas (facilita a leitura do consumo atual);
• Experiência no mercado financeiro ou de crédito;
• Certificações Databricks (Data Analyst Associate, Data Engineer Associate).