Engenheiro(a) de Analytics / Analista de Dados

Decision; São Paulo; Remote; BRL 120,000 - 240,000; Full time

Job summary

A Decision busca um engenheiro de analytics sênior para atuar com Data Warehouse legado e migração para Lakehouse, mapeando consumidores, dashboards e integrações, sob governança de dados.

Você desenvolverá modelos analíticos, marts de consumo por domínio, pipelines em Databricks (Delta Lake, Spark SQL) e validação de dados com Python/PySpark, trabalhando com Power BI/Tableau e APIs, em inglês avançado, contrato CLT e atuação remota internacional.

Qualifications

• Experiência sólida em Analytics Engineering, com foco em camada de consumo de dados.
• Conhecimento de Databricks, Spark SQL em produção, Delta Lake e arquitetura medalhão.
• Modelagem dimensional (Star Schema/Kimball) e criação de marts analíticos.
• Experiência com Power BI/Tableau e refatoração de datasets.
• SQL para validação, reconciliação de grandes volumes de dados.
• Integração de dados entre sistemas, APIs e cargas de dados.
• Unity Catalog para governança de dados.
• Python e PySpark para automação e validação.
• Conhecimento de Data Quality e Data Contracts.
• Certificações Databricks desejáveis.

Responsibilities

• Mapear e migrar consumidor do Data Warehouse legado para o ambiente Lakehouse.
• Conduzir migração de dashboards, relatórios e integrações para o novo ambiente.
• Validar consistência e paridade de dados entre legado e Lakehouse.
• Desenvolver consultas SQL e rotinas de automação para reconciliação e validação de dados.
• Aplicar governança, qualidade e documentação de dados.
• Colaborar com Product Owner e Arquiteto de Dados na priorização da migração.

Skills

Databricks

Spark SQL

Delta Lake

Data Modeling

SQL

Python

PySpark

Data Quality

Data Contracts

Unity Catalog

Power BI

Tableau

Data Lakehouse

Data Migration

Education

Databricks Data Analyst Associate

Databricks Data Engineer Associate

Job description

Atuação remota Inglês avançado - comunicação em ambiente internacional Contratação CLT.

Principais responsabilidades

• Mapear e identificar os consumidores do Data Warehouse legado, incluindo dashboards, relatórios, aplicações e integrações.
• Desenvolver e manter modelos analíticos e marts de consumo por domínio na camada gold do Databricks.
• Trabalhar com a arquitetura medalhão, considerando as camadas bronze, silver e gold.
• Conduzir a migração de fontes de dados e o redirecionamento de dashboards, relatórios e integrações para o novo ambiente.
• Validar a consistência e a paridade dos dados entre o ambiente legado e o novo Lakehouse.
• Desenvolver consultas SQL e rotinas de automação para reconciliação e validação de dados.
• Aplicar práticas de governança, qualidade e documentação dos dados.
• Atuar em conjunto com Product Owner e Arquiteto de Dados na priorização e execução das etapas de migração.

Requisitos

• Experiência sólida em Analytics Engineering, especialmente na camada de consumo de dados.
• Experiência com Databricks, Spark SQL em produção, Delta Lake e arquitetura medalhão.
• Conhecimento de modelagem dimensional, incluindo Star Schema/Kimball, e criação de marts analíticos.
• Experiência com Power BI, Tableau ou ferramentas semelhantes, incluindo alteração de fontes e refatoração de datasets.
• SQL para validação, reconciliação e comparação de grandes volumes de dados.
• Experiência com integração de dados entre sistemas, APIs e processos de carga.
• Conhecimento de Unity Catalog para governança e gestão dos dados.
• Experiência com Python e PySpark para automação de processos e validações.
• Conhecimento de Data Quality e Data Contracts.
• Certificação Databricks Data Analyst Associate ou Data Engineer Associate.

Diferenciais

• Experiência em migração de Data Warehouse legado para Lakehouse.
• Conhecimento de Data Mesh, governança federada e dados como produto.
• Experiência com DataStage ou outras ferramentas ETL legadas.
• Conhecimento de camadas semânticas e catálogos de métricas.
• Experiência com observabilidade e monitoramento da qualidade dos dados.
• Vivência no mercado financeiro ou de crédito.
• Conhecimento de padrões abertos para contratos de dados, como ODCS.