Freelance Data Engineer – Microsoft Fabric & PySpark

Kingfisher Recruitment; Hasselt; On-site; EUR 55,000 - 75,000; Full time

Job summary

Kingfisher Recruitment zoekt een ervaren Data Engineer voor een Belgische organisatie die een modern dataplatform bouwt op Microsoft Fabric. Je specialiseert je in data-engineering, pipelines en kwaliteitsborging, met focus op Bronze naar Silver, naast af en toe Power BI-werk voor validatie.

Je werkt in het Nederlands en de scope omvat ongeveer 3 maanden met kans op verlenging, en ervaring met Databricks/Spark en lakehouse-architecturen is een sterke plus.

Qualifications

• Sterke ervaring als Data Engineer.
• 1) Kennis PySpark, inclusief performanceoptimalisatie.
• 2) Ervaring met lakehouse- en medallionarchitecturen.
• 3) Bekend met Microsoft Fabric; Databricks of Spark is een plus.
• 4) Je werkt in het Nederlands.

Responsibilities

• Bijdragen aan de verdere uitbouw van het dataplatform in Microsoft Fabric, met focus op data engineering en kwaliteitsborging.
• Ontsluiten van databronnen richting Bronze en bouwen van robuuste pipelines richting Silver; monitoring van kwaliteit, performance en schaalbaarheid.
• Actief afstemmen met business en stakeholders bij onduidelijke requirements i.p.v. aannames te maken.
• Binnenkort start de uitbouw van een Gold-laag / data product; mogelijk verlenging.

Skills

Data engineering

PySpark

Performance optimization

Lakehouse architecture

Medallion architecture

Microsoft Fabric

Databricks/Spark

Dutch language

Tools

Power BI

Job description

Onze klant is een grote, groeiende Belgische organisatie die volop investeert in de verdere uitbouw van haar dataomgeving. Binnen het interne datateam wordt gewerkt aan een modern dataplatform in Microsoft Fabric, opgebouwd volgens een lakehouse- en medallionarchitectuur.

Om een aantal belangrijke trajecten te versnellen zoeken ze uitbreiding in het data-team die snel operationeel kan worden en mee bouwt aan de verdere ontsluiting, verwerking en structurering van data.

Takenpakket

Hier werk je mee aan de verdere uitbouw van het dataplatform in Microsoft Fabric. De nadruk ligt duidelijk op data engineering, aangevuld met een stukje data-analyse en validatie.

Je ontsluit verschillende databronnen richting de Bronze-laag en bouwt robuuste pipelines om data verder te verwerken en verrijken richting Silver. Daarbij bewaak je datakwaliteit, performantie en schaalbaarheid en zorg je ervoor dat pipelines betrouwbaar en onderhoudbaar opgebouwd worden.

Daarnaast denk je kritisch mee over mappings, businessregels en datastructuren. Wanneer requirements of brondata niet volledig duidelijk zijn, stem je actief af met de business en andere stakeholders in plaats van zelf assumpties te maken.

Binnenkort start het team ook met de verdere uitbouw van een eerste Gold-laag / data product. Bij verlenging van de opdracht bestaat de mogelijkheid om ook hier verder aan mee te werken.

Power BI kan occasioneel gebruikt worden om analyses uit te voeren en data te valideren, maar vormt niet de kern van de opdracht.

• Sterke ervaring als Data Engineer
• Sterke kennis PySpark, inclusief performanceoptimalisatie
• Ervaring met lakehouse- en medallionarchitecturen
• Ervaring met Microsoft Fabric is een sterke plus
• Sterke ervaring met Databricks, Spark of gelijkaardige moderne dataplatformen is ook een plus
• Je werkt in het Nederlands

Je mag rekenen op:

• initiële looptijd van ongeveer 3 maanden (grote mogelijkheid tot verlenging)