Senior Data Engineer

Dark Light; Antwerpen; Sur place; EUR 60 000 - 85 000; Plein temps

Résumé du poste

Dark Light zoekt een ervaren Data Engineer om een modern dataplatform op de Microsoft-stack verder uit te bouwen. Je werkt nauw samen met BI-specialisten en IT-collega’s aan betrouwbare datastromen en schaalbare dataoplossingen.

De rol vraagt hands-on ervaring met Microsoft Fabric, Azure Cloud en relevante data-componenten zoals Python, PySpark en SQL. Je werkt in een dynamische, Agile omgeving en draagt bij aan data-driven besluitvorming.

Qualifications

• Meerdere jaren ervaring als Data Engineer.
• Sterke achtergrond in Microsoft-technologieën.
• Hands-on ervaring met Microsoft Fabric, Azure Cloud, Python, PySpark en SQL.

Responsabilités

• Ontwikkelen, beheren en optimaliseren van datapipelines en dataflows.
• Uitbreiden van Azure Data Factory en inrichten van data-orchestratie.
• Integreren van API’s en externe systemen.
• Uitvoeren van datamigraties naar Microsoft Fabric.
• Meewerken aan datamodellering en architectuurvraagstukken.
• Implementeren van datakwaliteitscontroles en integriteitscontroles.
• Bewaken van dagelijkse runs, databeschikbaarheid en Fabric-capaciteit.
• Samenwerken met stakeholders binnen een Agile/Scrum-team.

Connaissances

Microsoft Fabric

Azure Cloud

Python

PySpark

SQL

Data Quality

Medallion architecture

CI/CD

Git

DevOps

Metadata-driven

Fabric monitoring

MCP servers

Communication

Agile/Scrum

Outils

Microsoft Fabric

Azure Data Factory

Azure Analysis Services

Power BI

Description du poste

Wil jij bouwen aan een modern dataplatform binnen de Microsoft-stack? Voor een organisatie in volle ontwikkeling zoeken we een ervaren Data Engineer die op lange termijn mee wil bouwen aan betrouwbare datastromen en schaalbare dataoplossingen.

Je werkt nauw samen met BI-specialisten en andere IT-collega’s aan de verdere ontwikkeling van het dataplatform. De omgeving omvat Microsoft Fabric, Azure Data Factory, Azure Analysis Services en Power BI, met aandacht voor toekomstige AI-toepassingen, waaronder AI-agents.

Jouw verantwoordelijkheden

• Ontwikkelen, beheren en optimaliseren van datapipelines en dataflows.
• Uitbreiden van Azure Data Factory en inrichten van data-orchestratie.
• Integreren van API’s en externe systemen.
• Uitvoeren van datamigraties naar Microsoft Fabric.
• Meewerken aan datamodellering en architectuurvraagstukken.
• Implementeren van datakwaliteitscontroles, validatieregels en integriteitscontroles.
• Bewaken van dagelijkse runs, databeschikbaarheid en Fabric-capaciteit.
• Samenwerken met technische en functionele stakeholders binnen een Agile/Scrum-team.

Je hebt meerdere jaren ervaring als Data Engineer en een sterke achtergrond in Microsoft-technologieën. Daarnaast beschik je over:

• Aantoonbare hands-on ervaring met Microsoft Fabric en sterke kennis van Azure Cloud en relevante datacomponenten.
• Aantoonbare ervaring met Python en PySpark, aangevuld met kennis van SQL.
• Ervaring met migraties naar Microsoft Fabric.
• Ervaring met Data Quality Engineering en het beheren van complexe datastromen.
• Kennis van datamodelleringsmethodieken en de Medallion-architectuur.
• Ervaring met CI/CD, Git en DevOps.
• Ervaring met metadatagedreven dataframeworks.
• Ervaring met Fabric capacity monitoring en monitoring van dagelijkse runs.
• Kennis van MCP-servers.
• Goede communicatieve vaardigheden en het vermogen om met technische en functionele collega’s samen te werken.