Overview
Buscamos um profissional para liderar a estruturação e a manutenção do nosso ecossistema de dados. O foco principal será a implementação e gestão do Unity Catalog, estabelecendo políticas de governança que garantam a segurança, conformidade e qualidade dos dados utilizados em modelos de Analytics e Inteligência Artificial.
Principais Responsabilidades
- Gestão de Unity Catalog: Configurar e administrar o Unity Catalog (Databricks) para garantir o controle de acesso centralizado (lineage, permissões e auditoria).
- Políticas de Governança: Desenvolver e implementar políticas de governança de dados e IA, garantindo que o ciclo de vida dos dados esteja em conformidade com normas (como LGPD) e boas práticas de mercado.
- Documentação Técnica: Atuar ativamente na criação de catálogos de dados, dicionários, diagramas de linhagem e manuais de processos. A documentação será um pilar central da entrega.
- Governança de IA: Estabelecer diretrizes para o uso ético e seguro de modelos de IA, monitorando a qualidade dos dados de entrada (inputs) e a rastreabilidade dos modelos.
- Segurança e Acessos: Definir e gerenciar perfis de acesso, garantindo que a democratização dos dados ocorra de forma segura.
- Colaboração: Atuar como ponte entre as equipes de Engenharia de Dados, Cientistas de Dados e Stakeholders de negócio para garantir a integridade da informação.
Requisitos Técnicos (Hard Skills)
- Experiência sólida com Databricks e configuração de Unity Catalog.
- Conhecimento profundo em SQL e linguagens utilizadas em ambiente de dados (Python ou Scala).
- Vivência com frameworks de Governança de Dados (DAMA-DMBOK, COBIT ou similares).
- Experiência com ferramentas de Catálogo de Dados e Linhagem (Data Lineage).
- Entendimento de fluxos de MLOps e governança aplicada a modelos de IA.
- Habilidade excepcional em escrita técnica e documentação.
Diferenciais
- Certificações Databricks (Certified Data Engineer ou similar).
- Conhecimento em infraestrutura de nuvem (AWS, Azure ou GCP).
- Experiência prévia em projetos de migração para ambientes de governança centralizada.
Perfil Desejado (Soft Skills)
- Perfil Analítico: Capacidade de organizar grandes volumes de informação de forma lógica.
- Atenção aos Detalhes: Rigor com a padronização e qualidade da documentação.
- Comunicação Assertiva: Capacidade de explicar políticas complexas de forma simples para diferentes áreas.
Local: Remoto