Engenheiro(a) de Dados Sênior: Azure & Databricks

Solorecruiter; United States; Híbrido; USD 36.000 - 56.000; Jornada completa

Descripción de la vacante

Solorecruiter procura Engenheiro(a) de Dados Sênior para atuar em projetos estratégicos envolvendo Azure e Databricks. O profissional irá projetar, construir e evoluir pipelines de dados de alta performance, com foco em governança, qualidade e escalabilidade.

A função exige experiência avançada em Python/SQL, Spark, Data Factory e plataformas Azure, com atuação em Data Lakes/Lakehouse e integração com ferramentas de CI/CD. Trabalho híbrido com atuação em Porto Alegre/remote.

Formación

• Experiência sólida como Engenheiro(a) de Dados em ambiente Azure.
• Domínio de Data Factory, ADLS Gen2, Databricks, Synapse Analytics e Azure Functions.
• Experiência em pipelines ETL/ELT.
• Conhecimento avançado em Python e SQL.
• Modelagem de dados para ambientes analíticos e Data Lakes/Lakehouse.
• Conhecimento em Spark/PySpark.
• Controle de versão com Git e práticas de CI/CD, idealmente Azure DevOps.
• Conhecimento em particionamento, otimização de consultas e processamento distribuído.
• Arquitetura de dados em Cloud, governança, LGPD e segurança.

Responsabilidades

• Projetar, desenvolver e evoluir pipelines de dados escaláveis com Azure e Databricks.
• Implementar ETL/ELT robusto com ingestão em tempo real.
• Otimizar soluções com Azure Data Factory, ADLS Gen2, Databricks e Synapse para performance e custo.
• Projetar e manter Data Lakes e arquiteturas Lakehouse (Bronze/Silver/Gold).
• Desenvolver soluções com Python, SQL e PySpark com foco em qualidade de dados.
• Atuar com grandes volumes de dados estruturados e não estruturados.
• Garantir governança, segurança e conformidade (LGPD) ao longo do pipeline.
• Monitorar, diagnosticar falhas e manter observabilidade dos pipelines.
• Colaborar com Analytics, Ciência de Dados, Engenharia de Software e Arquitetura.

Conocimientos

Python

SQL

PySpark

Liderança técnica

Analítica de dados

Inglês técnico

Herramientas

Azure Data Factory

Azure Databricks

ADLS Gen2

Azure Synapse Analytics

Azure Functions

Event Hubs

Event Grid

Unity Catalog

Delta Lake

Databricks Workflows

Terraform

Bicep/ARM Templates

Docker

Kubernetes (AKS)

Git & CI/CD (Azure DevOps)

Descripción del empleo

Solorecruiter procura Engenheiro(a) de Dados Sênior para atuar em projetos estratégicos envolvendo Azure e Databricks. O profissional irá projetar, construir e evoluir pipelines de dados de alta performance, com foco em governança, qualidade e escalabilidade.

A função exige experiência avançada em Python/SQL, Spark, Data Factory e plataformas Azure, com atuação em Data Lakes/Lakehouse e integração com ferramentas de CI/CD. Trabalho híbrido com atuação em Porto Alegre/remote.