Senior Data Engineer

Aurion First; Lisboa; Híbrido; EUR 70 000 - 100 000; Tempo integral

Vantagens oferecidas por esta oferta de emprego

Seguro de saúde

Flexibilidade de trabalho

Apoio à formação e certificações Aurio

Resumo da oferta

Aurion, empresa de TI, procura Senior Data Engineer especializado em Microsoft Fabric & Azure para um projeto de modernização de plataforma corporativa de dados em Portugal. O profissional vai desenvolver soluções de dados, criar pipelines com PySpark, Spark SQL, Python e SQL, e aplicar ETL/ELT em arquiteturas Lakehouse/Medallion.

Para além disso, é essencial integrar novas fontes de dados, assegurar qualidade, fiabilidade e disponibilidade para reporting, analytics e IA, e conduzir CI/CD

Qualificações

• Experiência comprovada em Data Engineering (≥7 anos) com foco em plataformas de dados.
• Expertise em Microsoft Fabric e Microsoft Azure e em pipelines de dados.
• Conhecimentos de ETL/ELT, modelação de dados e arquiteturas Lakehouse/Medallion.

Responsabilidades

• Desenvolver e evoluir soluções de dados com Fabric & Azure.
• Criar pipelines, notebooks e processos de integração de dados com PySpark, Spark SQL, Python e SQL.
• Implementar ETL/ELT em arquiteturas Lakehouse/Medallion (Bronze, Silver, Gold).
• Integrar novas fontes de dados na plataforma corporativa e garantir qualidade de dados para reporting, analytics e IA.
• Implementar CI/CD, versionamento e deploys automatizados.
• Colaborar com Data Governance, Arquitetura e IT.

Conhecimentos

PySpark

Spark SQL

Python

SQL

ETL/ELT

Data Quality

Data Lineage

Metadata Mgmt

Master Data Mgmt

Data Governance

CI/CD

Formação académica

Ferramentas

Microsoft Fabric

Microsoft Azure

Delta Lake

OneLake

Git

CI/CD tooling

Descrição da oferta de emprego

A Aurion é uma empresa de Tecnologias de Informação que tem por missão prestar serviços de consultoria, desenvolvimento, implementação e manutenção de sistemas de informação que contribuem para o progresso da sociedade e para os objetivos dos nossos Clientes.

Estamos a recrutar um(a) Senior Data Engineer – Microsoft Fabric & Azure para integrar um projeto de transformação e modernização de uma plataforma corporativa de dados, num dos maiores operadores de telecomunicações em Portugal.

O que vais fazer?

• Desenvolver e evoluir soluções de dados em Microsoft Fabric e Microsoft Azure
• Criar pipelines, notebooks e processos de integração de dados com PySpark, Spark SQL, Python e SQL
• Implementar processos de ETL/ELT em arquiteturas Lakehouse e Medallion — Bronze, Silver e Gold
• Integrar novos sistemas e fontes de dados na plataforma corporativa
• Garantir a qualidade, fiabilidade e disponibilização dos dados para reporting, analytics e Inteligência Artificial
• Implementar processos de CI/CD, versionamento e automatização de deployments
• Colaborar com equipas de Data Governance, Arquitetura, IT, Inteligência Artificial e áreas de negócio
• Mais de 7 anos de experiência em Data Engineering ou funções semelhantes
• Experiência profissional com Microsoft Fabric e Microsoft Azure
• Experiência com ETL/ELT, modelação de dados e arquiteturas Lakehouse/Medallion
• Conhecimentos de Fabric Lakehouse, Fabric Warehouse, OneLake e Delta Lake
• Experiência com Git e processos de CI/CD
• Conhecimentos de Data Quality, Data Lineage, Metadata Management e Master Data Management
• Boa capacidade de comunicação, organização e trabalho em equipa
• Certificações Microsoft, como DP-203, DP-600, DP-700 ou equivalentes, serão valorizadas
• Integração em projetos desafiantes
• Remuneração competitiva e progressão de carreira
• Formação contínua, certificações e apoio Aurion
• Flexibilidade de trabalho
• Seguro de saúde