Senior Data Engineer

HR ProjectPartners BV; Rotterdam; On-site; EUR 90,000 - 130,000; Full time

Job summary

HR ProjectPartners BV zoekt een Senior Data Engineer die schaalbare dataoplossingen ontwikkelt en beheert met Microsoft Fabric als kerntechnologie.

Je migreert dataoplossingen van Azure Synapse naar Fabric, bouwt datapipelines en dimensionele modellen, en zorgt voor datakwaliteitscontroles en kostenoptimalisatie.

Qualifications

• Minimaal 7 jaar ervaring als Data Engineer binnen Microsoft Azure.
• Kennis van Microsoft Fabric en/of Azure Synapse Analytics.
• Ruime ervaring met lakehouse-architecturen en medallion-principes.
• Ervaring met complexe databronnen en CI/CD.
• Ervaring met agile werken en het vertalen van requirements naar technische oplossingen.
• Bij voorkeur Microsoft Azure-certificeringen zoals DP-203.

Responsibilities

• Migreren van dataoplossingen van Azure Synapse Analytics naar Microsoft Fabric.
• Ontwikkelen en optimaliseren van datapipelines en datamodellen.
• Verwerken van gestructureerde en ongestructureerde databronnen in een lakehouse.
• Implementeren van datakwaliteitscontroles en monitoring.
• Begeleiden van collega’s en delen van kennis binnen het team.
• Automatiseren van ontwikkel- en deploymentprocessen met Azure DevOps, Git en CI/CD.

Skills

Microsoft Fabric

Azure Synapse Analytics

PySpark

Lakehouse architecture

Medallion principles

Azure DevOps

Git

CI/CD

Data engineering

Analytics

Tools

Azure DevOps

Git

CI/CD tooling

Job description

Als Senior Data Engineer ben je verantwoordelijk voor het ontwikkelen, beheren en optimaliseren van schaalbare dataoplossingen. Je ontsluit en verwerkt gegevens uit verschillende bronnen en vertaalt deze naar betrouwbare dataproducten. Je werkt samen met data-analisten, architecten en andere engineers aan de verdere ontwikkeling van een modern dataplatform, met Microsoft Fabric als belangrijke technologie.

Je werkzaamheden bestaan onder andere uit:

• Migreren van dataoplossingen van Azure Synapse Analytics naar Microsoft Fabric.
• Ontwikkelen en optimaliseren van datapipelines, PySpark-notebooks en dimensionele datamodellen.
• Verwerken van gestructureerde en ongestructureerde databronnen binnen een lakehouse-architectuur.
• Implementeren van datakwaliteitscontroles, monitoring en performance- en kostenoptimalisaties.
• Automatiseren van ontwikkel- en deploymentprocessen met Azure DevOps, Git en CI/CD.
• Oplossen van complexe technische vraagstukken en documenteren van oplossingen.
• Begeleiden van collega’s en delen van technische kennis binnen het team.
• Minimaal 7 jaar ervaring als Data Engineer binnen Microsoft Azure, met kennis van Microsoft Fabric en/of Azure Synapse Analytics.
• Ruime ervaring met lakehouse-architecturen en medallion-principes.
• Ervaring met complexe databronnen, Azure DevOps, Git en CI/CD.
• Ervaring met agile werken en het vertalen van requirements naar technische oplossingen.
• Bij voorkeur in het bezit van relevante Microsoft Azure-certificeringen, zoals DP-203.

Je bent proactief, zelfstandig en analytisch sterk. Je communiceert gemakkelijk met verschillende stakeholders, neemt initiatief bij technische uitdagingen en weet complexe vraagstukken te vertalen naar efficiënte, schaalbare oplossingen. Daarnaast deel je actief je kennis en help je collega’s hun technische vaardigheden verder te ontwikkelen.