ENGENHEIRO(A) DE DADOS – AZURE DATABRICKS

Bluesix; Brasil; Remoto; BRL 167.000 - 234.000; Tempo pieno

Descrizione del lavoro

A Bluesix está oferecendo um projeto de 5 semanas com contratação no regime PJ para atuação em dados. O desafio envolve construir pipelines com Azure Databricks, PySpark e Python, com foco em desempenho e processamento distribuído.

O candidato ideal domina Delta Lake, arquitetura Lakehouse, Azure Data Factory e princípios de governança de dados, incluindo Git, CI/CD e boas práticas de desenvolvimento para entregar soluções escaláveis.

Competenze

• Conhecimento avançado em Azure Databricks, PySpark, Python e SQL.
• Experiência com Delta Lake e arquitetura Lakehouse.
• Conhecimento de ADF, governança de dados e práticas de desenvolvimento (Git, CI/CD).

Conoscenze

Azure Databricks

Python

PySpark

SQL

Delta Lake

Lakehouse

Azure Data Factory

ETL/ELT

Git

CI/CD

Big data

Performance tuning

Strumenti

Terraform

Azure DevOps

Azure Synapse Analytics

Kafka

Event Hubs

Descrizione del lavoro

Contratação: PJ - Projeto: 5 semanas

Requisitos

• Azure Databricks
• Python, PySpark e SQL
• Delta Lake e arquitetura Lakehouse
• Arquitetura Medalhão (Bronze, Silver e Gold)
• Azure Data Factory (ADF)
• Data Lakes, ETL/ELT e processamento distribuído
• Otimização de performance e grandes volumes de dados
• Git, CI/CD e boas práticas de desenvolvimento

Diferenciais

• Unity Catalog e governança de dados
• Azure Synapse Analytics e Microsoft Fabric
• Event Hubs, Kafka e streaming
• Terraform e Azure DevOps
• Certificações Microsoft Azure