Data Engineer Mid-Level | Microsoft Azure

JobCubby; Lisboa; Híbrido; EUR 34 000 - 58 000; Tempo integral

Resumo da oferta

A Expleo procura um Data Engineer com experiência prática no desenvolvimento de soluções de dados em Microsoft Azure, com foco em Azure Databricks e pipelines de ingestão de dados.

O profissional deverá trabalhar na transformação de dados, preparação e disponibilização de informação, com conhecimento em PySpark, ETL/ELT, ADLS, Parquet e Delta Lake, em Lisboa.

Qualificações

• 2–5 anos de experiência em Data Engineering.
• Experiência sólida em Microsoft Azure.
• Experiência em Azure Databricks, PySpark e ETL/ELT.

Responsabilidades

• Desenvolver pipelines, ingestão e transformação de dados, e disponibilização de informação.

Conhecimentos

Data Engineering

Microsoft Azure

Azure Databricks

PySpark

ETL/ELT

Azure Data Lake Storage

Parquet

Delta Lake

Ferramentas

JIRA

Confluence

Descrição da oferta de emprego

Overview

Expleo is a trusted partner for your innovation journey. As a global engineering, technology and consulting service provider, we are ideally positioned to help you achieve your ambitions and future-proof your business. With a smart blend of bold thinking and reliable execution, we’re able to fast-track innovation through each step of your value chain.

We are strategically positioned to build value, with global footprint across 30 countries.We are as global and local as you need us to be, with strong best-in-class pan-European technological centres and unique best-shoring capabilities.

We leverage a network of high value-adding affiliates in consulting and industrial excellence, and leading partners across multiple sectors to provide you with the most comprehensive services and solutions in an ever-changing environment.

Responsibilities

Procuramos um Data Engineer com experiência prática no desenvolvimento de soluções de dados em Microsoft Azure, com especial foco em Azure Databricks.O profissional deverá ter capacidade para trabalhar no desenvolvimento de pipelines, ingestão e transformação de dados, preparação/modelação e disponibilização de informação.

Essential skills

• 2–5 anos de experiência em Data Engineering
• Experiência sólida em Microsoft Azure
• Experiência em Azure Databricks
• Experiência com PySpark / notebooks
• Experiência em desenvolvimento de ETL/ELT
• Experiência com Azure Data Lake Storage / ADLS
• Conhecimentos de Parquet
• Conhecimentos de Delta Lake

Desired skills

• Experiência com Azure Data Factory
• Experiência de migração de Scala para PySpark
• Azure Synapse
• JIRA
• Confluence