Data Platform Engineer: Pipelines, Spark & Azure Fabric

emagine; Lisboa; Presencial; EUR 55 000 - 75 000; Tempo integral

Resumo da oferta

A emagine está recrutando um especialista para estruturar o Pipeline de Dados em Lisboa, Portugal. O foco é construir, otimizar e manter pipelines ETL/ELT, definindo camadas (raw, bronze, silver, gold) e governança.

O papel coordena a implementação técnica, assegurando padrões de arquitetura, desempenho, confiabilidade e escalabilidade, atuando como ponte entre o time técnico e stakeholders, promovendo melhorias contínuas e inovação.

Qualificações

• Experiência em construção de pipelines de dados (ETL/ELT) e governança de dados.
• Capacidade de manter alta performance, confiabilidade e escalabilidade de código e jobs.
• Habilidade de atuar como ponte entre time técnico e stakeholders.
• Conhecimento de padrões de camadas (raw, bronze, silver, gold) e catalogação de dados.
• Capacidade de resolver gargalos técnicos e capacitar a equipe com as tecnologias escolhidas.

Responsabilidades

• Constrói, otimiza e mantém pipelines de ingestão, transformação e carga de dados (ETL/ELT).
• Define a arquitetura dos pipelines, padrões, camadas e governança.
• Coordena a implementação técnica dos pipelines, assegurando boas práticas e padrões da arquitetura.
• Foco na execução técnica, performance e confiabilidade do código e jobs.
• Ferramentas e tecnologias: Spark, SQL, Python, Delta Lake e Azure Fabric.

Ferramentas

Spark

SQL

Python

Delta Lake

Arquitetura de dados

Azure Fabric

Descrição da oferta de emprego

A emagine está recrutando um especialista para estruturar o Pipeline de Dados em Lisboa, Portugal. O foco é construir, otimizar e manter pipelines ETL/ELT, definindo camadas (raw, bronze, silver, gold) e governança.

O papel coordena a implementação técnica, assegurando padrões de arquitetura, desempenho, confiabilidade e escalabilidade, atuando como ponte entre o time técnico e stakeholders, promovendo melhorias contínuas e inovação.