Senior Data Engineer — Azure & Fabric Data Platform

Aurion First; Lisboa; Híbrido; EUR 70 000 - 100 000; Tempo integral

Vantagens oferecidas por esta oferta de emprego

Seguro de saúde

Flexibilidade de trabalho

Apoio à formação e certificações Aurio

Resumo da oferta

Aurion, empresa de TI, procura Senior Data Engineer especializado em Microsoft Fabric & Azure para um projeto de modernização de plataforma corporativa de dados em Portugal. O profissional vai desenvolver soluções de dados, criar pipelines com PySpark, Spark SQL, Python e SQL, e aplicar ETL/ELT em arquiteturas Lakehouse/Medallion.

Para além disso, é essencial integrar novas fontes de dados, assegurar qualidade, fiabilidade e disponibilidade para reporting, analytics e IA, e conduzir CI/CD

Qualificações

• Experiência comprovada em Data Engineering (≥7 anos) com foco em plataformas de dados.
• Expertise em Microsoft Fabric e Microsoft Azure e em pipelines de dados.
• Conhecimentos de ETL/ELT, modelação de dados e arquiteturas Lakehouse/Medallion.

Responsabilidades

• Desenvolver e evoluir soluções de dados com Fabric & Azure.
• Criar pipelines, notebooks e processos de integração de dados com PySpark, Spark SQL, Python e SQL.
• Implementar ETL/ELT em arquiteturas Lakehouse/Medallion (Bronze, Silver, Gold).
• Integrar novas fontes de dados na plataforma corporativa e garantir qualidade de dados para reporting, analytics e IA.
• Implementar CI/CD, versionamento e deploys automatizados.
• Colaborar com Data Governance, Arquitetura e IT.

Conhecimentos

PySpark

Spark SQL

Python

SQL

ETL/ELT

Data Quality

Data Lineage

Metadata Mgmt

Master Data Mgmt

Data Governance

CI/CD

Formação académica

Ferramentas

Microsoft Fabric

Microsoft Azure

Delta Lake

OneLake

Git

CI/CD tooling

Descrição da oferta de emprego

Aurion, empresa de TI, procura Senior Data Engineer especializado em Microsoft Fabric & Azure para um projeto de modernização de plataforma corporativa de dados em Portugal. O profissional vai desenvolver soluções de dados, criar pipelines com PySpark, Spark SQL, Python e SQL, e aplicar ETL/ELT em arquiteturas Lakehouse/Medallion.

Para além disso, é essencial integrar novas fontes de dados, assegurar qualidade, fiabilidade e disponibilidade para reporting, analytics e IA, e conduzir CI/CD