Engenheiro(a) Sênior de Dados

Grupo Regazzo

United States

Remote

USD 120,000 - 170,000

Full time

9 days ago

Get a reply from this employer

Your resume and cover letter, tailored to exactly what they’re hiring for.

Get past ATS filters

Job summary

Grupo Regazzo procura Engenheiro(a) Sênior de Dados com foco em Databricks para projetar e manter arquiteturas de dados escaláveis. O(a) profissional trabalhará em iniciativas estratégicas de dados, analytics e IA, combinando excelência técnica, aprendizado contínuo e colaboração entre equipes multidisciplinares.

O candidato ideal possui experiência prática com Delta Lake, Delta Live Tables, Unity Catalog e Uniform, além de domínio em Spark, SQL e pipelines de dados em ambientes Cloud.

Qualifications

  • Experiência comprovada em Engenharia de Dados com pipelines de dados.
  • Conhecimento de Databricks e pipelines batch, micro-batch e streaming.
  • Domínio de Delta Lake, Delta Live Tables, Unity Catalog e Uniform (Iceberg).
  • Experiência com pipelines de dados escaláveis orientadas por YAML.
  • Conhecimento em ingestão com Auto Loader ou tecnologias similares.
  • Sólida experiência em Spark e processamento distribuído.
  • Experiência com orquestração via Databricks Workflows, Airflow ou dbt.
  • Boas práticas de qualidade, auditoria e observabilidade de dados.
  • Conhecimento em plataformas de Big Data (Spark, Presto, EMR) e Data Warehouses na nuvem (Snowflake, Redshift, BigQuery).
  • SQL avançado, linguagem orientada a objetos (Python, PySpark ou Java).
  • CI/CD, DataOps/MLOps, Databricks Asset Bundles, NoSQL e containers.

Responsibilities

  • Desenvolver, implementar e otimizar soluções de dados em Databricks.
  • Projetar pipelines de dados batch, micro-batch e streaming escaláveis.
  • Aplicar recursos avançados do Databricks (Delta Lake, Unity Catalog, Iceberg).
  • Trabalhar com equipes multidisciplinares para arquiteturas modernas.
  • Garantir qualidade, desempenho, confiabilidade e governança de dados.
  • Criar padrões reutilizáveis de ingestão, transformação e disponibilização.
  • Desenvolver e manter workflows de orquestração (Databricks Workflows, Airflow, dbt).
  • Implementar observabilidade, auditoria e monitoramento de pipelines.
  • Participar da definição de pipelines CI/CD para ambientes de dados.
  • Apoiar iniciativas de IA, ML e DataOps; manter-se atualizado com novidades Databricks.

Skills

Engenharia de Dados
SQL Avançado
Python
PySpark
Apache Spark
Inglês Fluente
CI/CD
DataOps
MLOps
DevOps pipelines
NoSQL

Tools

Databricks
Airflow
dbt
Delta Lake
Unity Catalog
Uniform (Iceberg)
Databricks Workflows

Job description

Estamos em busca de um(a) Engenheiro(a) Sênior de Dados apaixonado(a) por tecnologia, inovação e resolução de problemas complexos. Procuramos alguém com perfil investigativo, forte capacidade analítica e experiência prática na construção de soluções modernas de dados utilizando a plataforma Databricks.

Nesta posição, você terá papel fundamental no desenvolvimento de arquiteturas escaláveis de dados, atuando em projetos estratégicos para clientes de diferentes segmentos. Esperamos um profissional que combine excelência técnica, aprendizado contínuo e colaboração para impulsionar iniciativas de dados, analytics e inteligência artificial.

Principais responsabilidades
  • Desenvolver, implementar e otimizar soluções de dados utilizando a plataforma Databricks.

  • Projetar e construir pipelines de dados escaláveis para processamento batch, micro-batch e streaming.

  • Implementar soluções utilizando recursos avançados da plataforma Databricks, incluindo Delta Lake, Delta Live Tables (Lakeflow Declarative Pipelines), Unity Catalog e Uniform (Iceberg).

  • Trabalhar em conjunto com equipes multidisciplinares para definir arquiteturas de dados modernas e alinhadas às necessidades do negócio.

  • Garantir a qualidade, desempenho, confiabilidade e governança dos dados ao longo de todo o ciclo de vida das soluções.

  • Desenvolver padrões reutilizáveis de ingestão, transformação e disponibilização de dados.

  • Criar e manter processos de orquestração de workflows utilizando ferramentas como Databricks Workflows, Airflow, dbt ou soluções equivalentes.

  • Implementar práticas de observabilidade, auditoria e monitoramento de pipelines de dados.

  • Participar da definição e evolução de pipelines CI/CD para ambientes de dados.

  • Apoiar iniciativas relacionadas a Inteligência Artificial, Machine Learning e DataOps.

  • Manter-se atualizado sobre novas funcionalidades do Databricks, tendências de engenharia de dados e melhores práticas do mercado.

Requisitos obrigatórios
  • Experiência sólida em Engenharia de Dados.

  • Mínimo de 2 anos de experiência prática no desenvolvimento de pipelines de dados utilizando Databricks.

  • Experiência comprovada com:

    • Delta Lake

    • Delta Live Tables (Lakeflow Declarative Pipelines)

    • Unity Catalog

    • Uniform (Iceberg)

  • Experiência no desenvolvimento de pipelines de dados batch, micro-batch e streaming.

  • Vivência na construção de soluções escaláveis e orientadas por configuração utilizando YAML.

  • Experiência com ingestão e processamento de dados utilizando Auto Loader ou tecnologias similares.

  • Conhecimento avançado em Apache Spark e processamento distribuído de dados.

  • Experiência na construção de fluxos de orquestração de dados utilizando Databricks Workflows, Airflow, dbt ou ferramentas equivalentes.

  • Conhecimento de práticas de qualidade, auditoria e observabilidade de dados.

  • Experiência com ferramentas de qualidade de dados como Great Expectations, dbt, Collibra ou similares.

  • Experiência com plataformas de Big Data, incluindo:

    • Apache Spark

    • Presto

    • Amazon EMR

  • Experiência com Data Warehouses em nuvem, como:

    • Snowflake

    • Amazon Redshift

    • Google BigQuery

  • Conhecimento avançado em SQL.

  • Experiência em linguagens de programação orientadas a objetos, como Python, PySpark ou Java.

  • Experiência com desenvolvimento e manutenção de pipelines DevOps e CI/CD.

  • Conhecimento em Databricks Asset Bundles para automação, validação e testes.

  • Familiaridade com bancos de dados NoSQL.

  • Conhecimento de tecnologias de containers e ambientes distribuídos.

  • Exposição a ferramentas e práticas de Inteligência Artificial e Machine Learning, incluindo MLflow.

  • Inglês Fluente

Diferenciais
  • Certificação Databricks Data Engineer Associate.

  • Certificação Databricks Data Engineer Professional.

  • Experiência com Terraform ou outras ferramentas de Infraestrutura como Código (IaC).

  • Vivência em projetos modernos de DataOps, MLOps e Platform Engineering.

  • Experiência com engenharia de prompts e aplicações baseadas em IA Generativa.

  • Participação em projetos de modernização de plataformas de dados em nuvem.

  • Histórico de atuação em múltiplos projetos corporativos utilizando Databricks.

Competências comportamentais
  • Perfil analítico e orientado à resolução de problemas.

  • Curiosidade intelectual e interesse contínuo por novas tecnologias.

  • Facilidade para atuar em ambientes dinâmicos e de constante evolução.

  • Boa comunicação e capacidade de compartilhar conhecimento.

  • Proatividade e senso de protagonismo.

  • Capacidade de trabalhar de forma colaborativa em equipes multidisciplinares.

  • Organização e atenção à qualidade das entregas.

  • Mentalidade voltada para inovação e melhoria contínua.

Get your free, confidential resume review.

or drag and drop your file here.

Similar jobs

Similar jobs worth comparing

Engenheiro Sênior de Dados | Databricks
Engenheiro Sênior de Dados | Databricks

confidential • United States

Remote
USD 120,000 - 180,000
Arquiteto Dados Sênior (Databricks)
Arquiteto Dados Sênior (Databricks)

Grupo Regazzo • United States

Remote
USD 180,000 - 260,000
Arquiteto Dados Sênior (Databricks)
Arquiteto Dados Sênior (Databricks)

confidential • United States

Remote
USD 150,000 - 210,000
12767420 - Engenheiro(a) de Dados Senior (Databricks / Unity Catalog)
12767420 - Engenheiro(a) de Dados Senior (Databricks / Unity Catalog)

Stefanini • United States

Remote
USD 120,000 - 160,000
Pessoa Engenheira de Dados Sênior
Pessoa Engenheira de Dados Sênior

Extractta • United States

Remote
USD 150,000 - 190,000
Vale Alimentação
Convênio Sesi/Sesc
Auxílio para Certificações
+2
12630267 - ENGENHEIRO DE DADOS SR - MICROSOFT FABRIC
12630267 - ENGENHEIRO DE DADOS SR - MICROSOFT FABRIC

Stefanini • United States

Remote
USD 120,000 - 180,000
Eng de Dados Pl/Sr [AFIRMATIVA PARA MULHERES]
Eng de Dados Pl/Sr [AFIRMATIVA PARA MULHERES]

DB | CRESCER com propósito! • United States

On-site
USD 90,000 - 130,000
Vale alimentação
Plano de saúde
Plano odontológico
+2
12811424 - ENGENHEIRO DE DADOS SR
12811424 - ENGENHEIRO DE DADOS SR

Stefanini • United States

Remote
USD 120,000 - 180,000
Engenheiro(a) de Dados & IA Sênior
Engenheiro(a) de Dados & IA Sênior

Maxxi • United States

Remote
USD 140,000 - 210,000
12871847 - ENGENHEIRO DADOS
12871847 - ENGENHEIRO DADOS

Stefanini • United States

Remote
USD 120,000 - 180,000