Engenheiro(a) de Dados Sênior – Databricks AI/BI e Genie

Dadoteca; Brasil; On-site; BRL 240,000 - 340,000; Full time

Job summary

A Dadoteca, empresa de tecnologia em Dados e Inteligência Artificial, busca Engenheira de Dados Sênior com sólida experiência em Databricks para liderar um projeto com Databricks AI/BI e Genie Space. Atuação envolve preparação/modelagem de dados, criação de análises e validação das respostas geradas pelo Genie, assegurando segurança, qualidade e desempenho.

Você trabalhará de forma colaborativa com equipes de Dados, Analytics, Tecnologia e áreas de negócio para entregar indicadores, dashboards e

Qualifications

• Experiência sólida em Databricks na prática, com atuação sênior.
• Domínio de Databricks SQL, Delta Lake e arquitetura Lakehouse.
• Conhecimento de Unity Catalog, governança e controle de acesso.
• Domínio de SQL para construção/otimização de consultas.
• Experiência em Python e/ou PySpark para preparo e transformação de dados.
• Modelagem de dados para soluções analíticas.
• Experiência em pipelines ETL/ELT e em construção de dashboards.
• Capacidade de traduzir necessidades de negócio em soluções de dados.
• Conhecimento de análises conversacionais/IA aplicada a dados é diferencial.

Responsibilities

• Desenvolver soluções analíticas com Databricks AI/BI e dashboards.
• Configurar Genie Space para consultas em linguagem natural.
• Definir indicadores, perguntas prioritárias e casos de uso com áreas de negócio.
• Preparar, transformar e modelar dados para as soluções.
• Criar/otimizar consultas com Databricks SQL.
• Configurar contexto, descrições e exemplos de consultas para o Genie.
• Validar a precisão/consistência das respostas da solução conversacional.
• Garantir governança, segurança e controle de acesso aos dados.
• Trabalhar colaborativamente com equipes de Dados, Analytics, Tecnologia e negócio.

Skills

Databricks

Databricks SQL

Python

PySpark

SQL

Delta Lake

Unity Catalog

ETL/ELT

Data modeling

Data pipelines

Generative AI / Genie

Databricks AI/BI

Genie Spaces

Education

Certificações Databricks (Engineering/Analytics/AI)

Tools

Databricks

Databricks SQL

Delta Lake

Unity Catalog

Python

PySpark

ETL/ELT

Databricks AI/BI

Genie Spaces

Job description

A Dadoteca é uma empresa de tecnologia especializada em Dados e Inteligência Artificial. Trabalhamos em um ambiente colaborativo, com projetos desafiadores e foco no desenvolvimento profissional e na inovação.

Buscamos uma pessoa Engenheira de Dados Sênior, com sólida experiência em Databricks, para atuar em um projeto de atendimento que terá como principais entregáveis a implementação de uma solução com Databricks AI/BI e a configuração de um Genie Space.

A pessoa será responsável pela preparação e modelagem dos dados, construção das análises, configuração do ambiente conversacional e validação das respostas geradas pelo Genie, garantindo segurança, qualidade, desempenho e aderência às necessidades do negócio.

A Dadoteca é uma empresa de tecnologia especializada em Dados e Inteligência Artificial. Trabalhamos em um ambiente colaborativo, com projetos desafiadores e foco no desenvolvimento profissional e na inovação.

Buscamos uma pessoa Engenheira de Dados Sênior, com sólida experiência em Databricks, para atuar em um projeto de atendimento que terá como principais entregáveis a implementação de uma solução com Databricks AI/BI e a configuração de um Genie Space.

A pessoa será responsável pela preparação e modelagem dos dados, construção das análises, configuração do ambiente conversacional e validação das respostas geradas pelo Genie, garantindo segurança, qualidade, desempenho e aderência às necessidades do negócio.

Atividades

• Desenvolver e implementar soluções analíticas utilizando Databricks AI/BI.
• Configurar e evoluir um Genie Space para permitir consultas aos dados em linguagem natural.
• Trabalhar com as áreas de negócio na definição de indicadores, perguntas prioritárias e casos de uso.
• Preparar, transformar e modelar os dados que serão utilizados pelas soluções.
• Criar e otimizar consultas utilizando Databricks SQL.
• Configurar instruções, contexto, descrições, relacionamentos e exemplos de consultas para o Genie.
• Validar a precisão e a consistência das respostas produzidas pela solução conversacional.
• Desenvolver dashboards e visualizações no ambiente Databricks AI/BI.
• Garantir qualidade, segurança, governança e controle de acesso aos dados.
• Atuar na identificação e correção de problemas relacionados aos dados, consultas e respostas do Genie.
• Otimizar a performance das consultas e dos componentes utilizados pela solução.
• Documentar arquitetura, fontes de dados, indicadores, regras de negócio, configurações e procedimentos.
• Realizar transferência de conhecimento para os times envolvidos.
• Trabalhar de forma colaborativa com equipes de Dados, Analytics, Tecnologia e áreas de negócio.

Requisitos

• Experiência sólida e atuação em nível sênior com Databricks.
• Experiência prática com Databricks SQL, Delta Lake e arquitetura Lakehouse.
• Conhecimento de Unity Catalog, governança e controle de acesso.
• Domínio de SQL para construção e otimização de consultas.
• Experiência com Python e/ou PySpark para preparação e transformação de dados.
• Conhecimento em modelagem de dados para soluções analíticas.
• Experiência na construção de pipelines e processos de ETL/ELT.
• Capacidade de analisar problemas, identificar causas e propor soluções.
• Experiência na interação com áreas de negócio para entendimento de indicadores e requisitos.
• Boa comunicação, autonomia e capacidade de atuar em um projeto com entregas definidas.

Competências

• Perfil analítico e orientado à resolução de problemas.
• Capacidade de traduzir necessidades de negócio em soluções de dados.
• Autonomia e senso de responsabilidade.
• Organização e atenção à qualidade das entregas.
• Boa comunicação com públicos técnicos e de negócio.
• Proatividade na identificação de riscos e oportunidades de melhoria.
• Facilidade para trabalhar de forma colaborativa com equipes multidisciplinares.

Diferenciais

• Experiência prática com Databricks AI/BI Dashboards.
• Experiência na criação ou configuração de Databricks Genie Spaces.
• Conhecimento em análises conversacionais e uso de linguagem natural sobre dados.
• Experiência com camada semântica, definição de métricas e documentação de regras de negócio.
• Conhecimento sobre validação e melhoria da qualidade das respostas geradas por IA.
• Certificações Databricks relacionadas a Engenharia de Dados, Analytics ou IA.
• Experiência em projetos de consultoria e atendimento direto a clientes.