Arquiteto De Dados

Niteo Technologies; Teletrabalho; BRL 80.000 - 120.000; Tempo integral

Resumo da oferta

Uma empresa de tecnologia está em busca de um(a) Arquiteto(a) de Dados para liderar a governança e arquitetura de dados. O candidato deve ter experiência com Microsoft Azure e Databricks, habilidades em ETL/ELT e conhecimento em governança de dados. É essencial um forte domínio em modelagem de dados, CI/CD e capacidade de programar em Python ou Scala. A vaga é remota e oferece a oportunidade de atuar em um ambiente dinâmico e colaborativo.

Qualificações

• Experiência comprovada em ambientes produtivos com Databricks e Spark.
• Sólido conhecimento em Azure, incluindo Synapse e Data Factory.
• Prática em governança de dados, ideal com ferramentas como Purview.
• Domínio em modelagem de dados e otimização de queries.
• Habilidade com CI/CD utilizando Azure DevOps e GitHub Actions.

Responsabilidades

• Projetar arquiteturas de dados escaláveis com Microsoft Azure e Databricks.
• Definir e implementar pipelines ETL/ELT focados em confiabilidade.
• Criar políticas de governança e garantir aderência a LGPD/GDPR.
• Documentar padrões e defender decisões técnicas.
• Mentorar equipe técnica e liderar provas de conceito.

Conhecimentos

Experiência com Databricks

Experiência em Azure

Modelagem de dados

CI/CD para infra e pipelines

Programação em Python/Scala/SQL

Troubleshooting de performance

Inglês técnico

Ferramentas

Databricks

Azure DevOps

Terraform

Azure Monitor

Descrição da oferta de emprego

Estamos em busca de um(a) Arquiteto(a) de Dados com experiência em Microsoft Azure e Databricks, para liderar iniciativas de governança e arquitetura de dados em projetos estratégicos. Se você é apaixonado por tecnologia, tem visão consultiva e gosta de ambientes dinâmicos e colaborativos, essa vaga é para você!

Responsabilidades

Projetar arquiteturas de dados escaláveis e resilientes usando Microsoft Azure (Synapse, Fabric, Data Factory, Purview, AD) e Databricks.

Definir e implementar pipelines ETL / ELT (Data Factory, Databricks, Spark, SQL) com foco em confiabilidade, observabilidade e custo.

Criar e operacionalizar camada de governança : catálogo de dados, lineage, políticas de acesso (RLS, RBAC), classificação de sensibilidade e masking.

Estabelecer práticas de data quality, contratos de dados e SLAs de ingestão / transformação.

Garantir aderência a LGPD / GDPR e melhores práticas de segurança (encryption, key management).

Documentar arquiteturas, padrões e runbooks; defender decisões técnicas em comitês de arquitetura.

Mentorar engenheiros e analistas, promovendo boas práticas, code reviews e automação (CI / CD para infra e pipelines).

Liderar PoCs e provas de valor, estimar esforços e mapear custos (cloud spend / FinOps mindset).

Colaborar com Product Owners para alinhar roadmap técnico com objetivos de negócio e time-to-market.

Requisitos Técnicos Necessários

Experiência comprovada com Databricks e Spark em ambientes produtivos.

Experiência sólida em Azure : Synapse, Data Factory (ADF), Azure SQL / SQL DW, AD / AAD e / ou Microsoft Fabric.

Vivência prática em governança de dados (catálogo, lineage, políticas, DLP) — ideal com Purview ou ferramentas equivalentes.

Forte domínio de modelagem de dados (star schema, normalização), particionamento e otimização de queries.

Experiência com CI / CD para infra e pipelines (ARM / Bicep / Terraform, Azure DevOps / GitHub Actions).

Conhecimentos de segurança : RBAC, encryption at rest / in-transit, key vaults, tokenização / mascaramento.

Capacidade de escrever código : Python / Scala / SQL para Databricks / Spark; bom domínio de SQL.

Habilidade em troubleshooting de performance e custo em data lakes / warehouses.

Inglês técnico para leitura de documentação.

Requisitos Desejáveis

Experiência com Microsoft Fabric (Workspaces, OneLake, SQL Endpoints).

Certificações : Databricks Certified Professional / Azure Data Engineer / Azure Solutions Architect.

Familiaridade com ferramentas de observabilidade e lineage (OpenLineage, MLflow, DataDog, Azure Monitor).

Conhecimento em MLOps e integração de modelos em pipelines.

Experiência em ambientes multi-tenant e governança em larga escala.

Local : Remoto