Engenheiro De Dados Sr (Azure/Databricks)

People Partners Consult

São Paulo

On-site

BRL 250,000 - 420,000

Full time

3 days ago

Be an early applicant

Get a reply from this employer

Your resume and cover letter, tailored to exactly what they’re hiring for.

Get past ATS filters

Qualifications

Experiência sênior em Engenharia de Dados com pipelines ETL/ELT.
Inglês avançado (C1/C2) para interface e workshops com stakeholders internacionais.
Expertise comprovada no ecossistema Azure (ADF, ADLS Gen2, Azure DevOps) e plataformas Databricks e Microsoft Fabric.
Domínio de Python, PySpark e SQL.
Vivência com Git, Delta Lake e esteiras de deploy CI/CD.

Responsibilities

Arquitetar, desenvolver e otimizar pipelines de dados (batch e streaming) em ambientes de altíssima volumetria.
Liderar implementações de arquiteturas Lakehouse utilizando Microsoft Fabric e Databricks.
Orquestrar fluxos complexos de ingestão e transformação via Python, PySpark, SQL e Azure Data Factory.
Aplicar os princípios de Arquitetura Medallion e Delta Lake para garantir disponibilidade analítica.
Liderar iniciativas de DataOps, implementando e otimizando processos de CI/CD (Azure DevOps) e monitoramento.
Conduzir alinhamentos, workshops de arquitetura e levantamento de requisitos técnicos diretamente com clientes globais e times multidisciplinares (Analytics, AI e Data Science).

Skills

Inglês avançado

ETL/ELT data

Azure Databricks

Python PySpark SQL

Git Delta Lake

CI/CD Azure DevOps

Tools

Azure Data Factory

ADLS Gen2

Microsoft Fabric

Databricks

Job description

Engenheiro De Dados Sr (Azure/Databricks)

São Paulo, SP - Brasil

Dados da vaga

Jornada de trabalho: Segunda à Sexta-feira

Responsabilidades e atribuições

Responsibility and Attributions- Arquitetar, desenvolver e otimizar pipelines de dados (batch e streaming) em ambientes de altíssima volumetria.- Liderar implementações de arquiteturas Lakehouse utilizando Microsoft Fabric e Databricks.- Orquestrar fluxos complexos de ingestão e transformação via Python, PySpark, SQL e Azure Data Factory.- Aplicar os princípios de Arquitetura Medallion e Delta Lake para garantir disponibilidade analítica.- Liderar iniciativas de DataOps, implementando e otimizando processos de CI/CD (Azure DevOps) e monitoramento.- Conduzir alinhamentos, workshops de arquitetura e levantamento de requisitos técnicos diretamente com clientes globais e times multidisciplinares (Analytics, AI e Data Science).

Requisitos e qualificações

Experiências e qualificações:Requirements and Qualifications- Inglês Avançado/Fluente (C1/C2) Mandatório para interface e workshops técnicos diários com stakeholders internacionais.- Bagagem profissional sênior em Engenharia de Dados (ETL/ELT ponta a ponta) e modelagem de Data Lakes/Lakehouses.- Expertise comprovada no ecossistema Azure (ADF, ADLS Gen2, Azure DevOps) e plataformas Databricks e Microsoft Fabric.- Domínio de manipulação e processamento distribuído utilizando Python, PySpark e SQL.- Vivência sólida com Git, Delta Lake e esteiras automatizadas de deploy.- Disponibilidade para atuar remotamente a partir de qualquer localidade do Brasil.

Get your free, confidential resume review.

or drag and drop your file here.