Engenharia / Arquitetura de Dados (Azure & Databricks) - Híbrido/SP - 129739

GFT Group; Barueri; Híbrido; BRL 80.000 - 120.000; Tempo integral

Resumo da oferta

Uma empresa de tecnologia em São Paulo busca um profissional especialista em engenharia de dados para atuar em modelo híbrido. O candidato ideal deve ter experiência em arquitetura lakehouse, pipelines escaláveis e integração de dados em Azure e Databricks. A posição requer habilidades em Python, conhecimento em Data Governance e proficiência em inglês. A empresa oferece um ambiente colaborativo e diversas oportunidades de crescimento.

Qualificações

• Experiência sólida em arquitetura lakehouse e pipelines escaláveis.
• Conhecimento em integração de dados em serviços Azure e Databricks.
• Experiência em Git e CI/CD aplicados a pipelines de dados.

Responsabilidades

• Projetar e desenvolver pipelines de ingestão e transformação de dados.
• Construir soluções baseadas em arquitetura lakehouse.
• Garantir performance e escalabilidade dos pipelines.

Conhecimentos

Arquitetura lakehouse

Pipelines escaláveis

Integração de dados em Azure

Databricks

Data Governance

Python

Inglês avançado

Ferramentas

Azure Data Lake Gen2

Azure Data Factory

Git

PySpark

Descrição da oferta de emprego

O que buscamos:

Profissional especialista em engenharia de dados para atuar em modelo híbrido (2 a 3 vezes por semana presencial na região da Faria Lima). Buscamos alguém com experiência sólida em arquitetura lakehouse, pipelines escaláveis e integração de dados em Azure e Databricks, com forte capacidade técnica e visão de governança.

Responsabilidades:

• Projetar e desenvolver pipelines escaláveis e robustos de ingestão e transformação de dados em Azure e Databricks;
• Construir soluções baseadas em arquitetura lakehouse com organização em camadas (bronze, silver, gold);
• Garantir performance e escalabilidade de pipelines através de boas práticas de particionamento, caching e paralelismo;
• Automatizar processos com foco em reusabilidade, monitoramento e controle de qualidade;
• Atuar como referência técnica para o time de engenharia de dados, promovendo boas práticas e padronizações;

Requisitos e Qualificações

• Experiência com bases de dados transacionais e análise de requisitos;
• Conhecimento em Data Governance;
• Domínio de Azure Data Lake Gen2, Azure Data Factory, Key Vault e integração entre serviços Azure;
• Proficiência em Spark (PySpark) e Python para desenvolvimento de pipelines e transformação de dados;
• Experiência com Git e CI/CD aplicados a pipelines de dados;
• Inglês avançado;

Diferencial:

• Conhecimento em soluções de governança e observabilidade de dados;
• Vivência em projetos com requisitos de segurança, auditoria e compliance;

Descrição comportamental:

Procuramos uma pessoa que:

• Goste de trabalhar em equipe e seja colaborativa em suas atribuições;
• Tenha coragem para se desafiar e ir além, abraçando novas oportunidades de crescimento;
• Transforme ideias em soluções criativas e busque qualidade em toda sua rotina;
• Tenha habilidades de resolução de problemas;
• Possua habilidade e se sinta confortável para trabalhar de forma independente e gerenciar o próprio tempo;
• Tenha interesse em lidar com situações adversas e inovadoras no âmbito tecnológico.

Big enough to deliver – small enough to care.

#VempraGFT

#VamosVoarJuntos

#ProudToBeGFT