Engenheiro De Dados Pl/Sr (Consultoria)

Netvagas; Florianópolis; Remote; BRL 156,000 - 257,000; Full time

Benefits offered by this job

Remoto

Plano de saúde

Conexa Saúde & Psicologia Viva

Open English descontos

Auxílio Home Office R$400

22 dias de recesso

Day off de aniversário

Job summary

Netvagas contrata Engenheiro de dados pl/sr (consultoria) para atuar em Florianópolis/SC. O(a) profissional irá atuar em projetos estratégicos de dados, projetar arquiteturas Lakehouse e otimizar pipelines de dados com foco em qualidade, governança e performance.

A vaga envolve trabalhar com Databricks, Delta Lake, SQL avançado e modelagem de dados (Star-Schema, Snowflake), além de governança de dados e cargas incrementais. Remoto, contrato PJ.

Qualifications

• Experiência sólida em Databricks e Delta Lakehouse.
• Forte conhecimento em SQL e otimização de queries para processamento distribuído.
• Experiência com ETL/ELT e arquitetura de dados escalável.
• Conhecimento de pipelines de dados incrementais (UPSERTS, MERGE, CDC).
• Experiência em modelagem de dados analítica (Star-Schema, Snowflake).
• Experiência com cargas em Databricks e tuning de performance.

Responsibilities

• Atuar como consultor em projetos estratégicos de negócios voltados para engenharia de dados.
• Identificar e implementar melhores práticas para cargas de grande volume de dados, assegurando performance e disponibilidade.
• Trabalhar com otimização de queries e modelagem de dados para melhorar a eficiência analítica.
• Desenvolver e manter pipelines de dados (ETL/ELT) para integração de várias fontes, com qualidade e governança.
• Desenhar arquiteturas de Data Lakehouse, aplicando Medalhão (Bronze, Silver, Gold).
• Apoiar a modelagem de dados para Data Warehouses modernos (Star-Schema, Snowflake).
• Explorar boas práticas em ambientes de Big Data com Databricks e Delta Lake.
• Utilizar formatos abertos como Delta Lake, Iceberg, Parquet e Avro para governança de arquiteturas Lakehouse.
• Garantir governança de dados, incluindo controle de acessos e versionamento.

Skills

SQL

ETL/ELT

Data modeling

Lakehouse architecture

Big Data best practices

Data governance

Tools

Databricks

Delta Lake

Unity Catalog

Parquet/Avro formats

S3

AWS

Job description

• Atuar como consultor em projetos estratégicos de negócios voltados para engenharia de dados utilizando plataforma Databricks;
• Identificar e implementar melhores práticas para cargas de grande volume de dados, garantindo performance e disponibilidade das informações;
• Trabalhar com otimização de queries e modelagem de dados para melhorar a eficiência em consultas analíticas;
• Desenvolver e manter pipelines de dados (ETL/ELT) para integração de diversas fontes, garantindo qualidade e governança;
• Desenhar e implementar arquiteturas de Data Lakehouse, aplicando o conceito Medalhão (Bronze, Silver, Gold);
• Apoiar a modelagem de dados para Data Warehouses modernos (Star-Schema, Snowflake);
• Explorar boas práticas em ambientes de Big Data, especialmente no contexto Databricks e Delta Lake;
• Uso de formatos abertos como Delta Lake, Iceberg, Parquet e Avro para construção e governança de arquiteturas Lakehouse modernas;
• Garantir a governança de dados, incluindo controle de acessos e versionamento.

Requisitos:

Buscamos alguém com:

• Experiência sólida em Databricks e arquitetura Delta Lakehouse;
• Forte conhecimento em SQL e otimização de queries para processamento distribuído;
• Experiência com ETL/ELT e arquitetura de dados escalável;
• Conhecimento de pipelines de dados incrementais (UPSERTS, MERGE, CDC);
• Experiência em modelagem de dados analítica (Star-Schema, Snowflake);
• Experiência com cargas em Databricks, incluindo refatoração de pipelines e tuning de performance;

Diferenciais:

• Familiaridade com Unity Catalog para governança e controle de acesso em Databricks;
• Conhecimento em Data Warehouses modernos (Databricks, Snowflake, BigQuery, Redshift);
• Vivência em arquiteturas na AWS, com domínio de serviços como S3, IAM, Glue e EMR;
• Experiência em provisionar e configurar clusters Databricks do zero, incluindo aspectos de infraestrutura, rede, permissões e integração com catálogos de dados.

O que oferecemos:

• Flexibilidade! Nosso time é remoto, você pode trabalhar onde quiser;
• Plano de saúde e odontológico SulAmérica (sem custo para o titular) - após entrar no plano, terá TotalPass e Subsídio de até R$200 para medicamentos tarjados;
• Conexa Saúde & Psicologia Viva;
• Parceria Corporativa com a Open English (descontos em cursos de Inglês & Espanhol);
• Caju: Auxílio Home Office de R$400;
• Recesso remunerado de 22 dias úteis/ano;
• Day off de aniversário;
• Modelo de contratação PJ.

Engenheiro de dados pl/sr (consultoria) • FLORIANOPOLIS, SC, BR