Engenheiro de Dados Sênior - IA

K2; São Paulo; Hybrid; BRL 180,000 - 300,000; Part time

Job summary

A K2 busca profissional com atuação híbrida em São Paulo para liderar governança de dados e engenharia de dados. O papel envolve administrar Databricks, Unity Catalog, Delta Lake e PySpark/SQL, além de aplicar IA e automação para acelerar processos de governança.

REQUISITOS incluem SQL avançado, Python, experiência com LGPD, RBAC/ABAC e comunicação bilíngue, capaz de dialogar com engenheiros e Diretores de Negócio. Prototipação com dbt e ferramentas modernas é valorizada.

Qualifications

• Experiência prática em Engenharia de Dados e automação de processos com Governança de Dados.
• Domínio do Databricks e Unity Catalog com Delta Lake e PySpark/SQL.
• Aplicação prática de IA e automação para governança de dados.
• Proficiência em SQL avançado e Python para análise de dados e automação.
• Conhecimento de LGPD, Controle de acesso RBAC/ABAC e qualidade/linhagem de dados.

Responsibilities

• Conduzir governança de dados, qualidade e linhagem de dados, com glossário de negócio.
• Construir e manter arquitetura de dados com RBAC/ABAC e políticas de acesso.
• Colaborar com equipes de engenharia e negócio para alinhar métricas e requisitos.
• Prototipar dashboards/portais de governança com ferramentas modernas.
• Aplicar IA/automação para acelerar tarefas técnicas de governança.

Skills

Governança de Dados

SQL Avançado

Python

Databricks

Unity Catalog

Delta Lake

PySpark/SQL

IA & Automação

RBAC/ABAC

LGPD (anonimização/mascaramento)

Linguagens de Código

Comunicação Bilíngue

Education

Databricks Data Engineer Certification

Databricks Generative AI Engineer Certification

DAMA CDMP

Tools

Lovable

Streamlit

Retool

dbt Core

dbt Semantic Layer

N8N

AI Agents

APIs

Job description

Híbrido - SP Requisitos Obrigatórios

• Perfil Hands-On / Governança + Engenharia: experiência prática em Engenharia de Dados e automação de processos, combinada com Governança de Dados.
• Domínio do Databricks & Unity Catalog: Experiência prática avançada na administração, arquitetura e controle de acesso (Unity Catalog, Delta Lake, PySpark/SQL).
• Uso Prático de IA e Automação: Vivência na aplicação de LLMs (Claude, GPT, Gemini) e ferramentas de automação/orquestração (N8N, Agentes de IA, Python scripts, APIs) para acelerar tarefas técnicas de governança.
• Linguagens e Código: Domínio de SQL avançado e Python para análise de dados, criação de automações e parsing de metadados.
• Conceitos de Governança: Experiência com implementação de Data Quality, Linhagem, Glossário de Negócio, LGPD (anonimização/mascaramento) e controle de acessos (RBAC/ABAC).
• Comunicação Bilingue (Técnico e Negócio): Capacidade de discutir arquitetura com engenheiros e, no minuto seguinte, alinhar definições de métricas com Diretores de Negócio.

Diferenciais

• Experiência em desenvolvimento rápido/prototipagem usando ferramentas modernas (Lovable, Streamlit, Retool, v0 ou similares) para criar interfaces e portais de governança.
• Conhecimento e uso de dbt (dbt Core / dbt Semantic Layer).
• Vivência nos conceitos de Data Mesh, Data Fabric e Data Products.
• Certificações Databricks (Data Engineer Professional ou Generative AI Engineer) ou certificações em Governança (DAMA CDMP).