Senior Data Engineer (freelance)

Kingfisher Recruitment; Tessenderlo; On-site; EUR 52,000 - 78,000; Full time

Benefits offered by this job

3 maanden initiële looptijd

Mogelijkheid tot verlenging

Job summary

Kingfisher Recruitment zoekt een ervaren Data Engineer om samen met het team een modern dataplatform verder uit te bouwen in Microsoft Fabric. De focus ligt op data engineering, aangevuld met data-analyse en validatie.

Je pipeline-werk richt zich op ontsluiting van databronnen naar Bronze, door naar Silver te verrijken, met aandacht voor datakwaliteit, performance en schaalbaarheid. Communicatie met business en stakeholders is essentieel; er is ook ruimte voor een mogelijke Gold-laag.

Qualifications

• Sterke ervaring als Data Engineer.
• Ervaring met PySpark en performance-optimalisatie.
• Kennis van lakehouse- en medallion-architecturen.
• Ervaring met Microsoft Fabric is een sterke plus.
• Sterke kennis van Databricks/Spark of gelijkaardige platformen.
• Je werkt in het Nederlands.

Responsibilities

• Je werkt mee aan de uitbouw van het dataplatform en de data-omgeving.
• Je bouwt robuuste ETL/ELT-pipelines richting Bronze en Silver, en bewaakt datakwaliteit, performantie en schaalbaarheid.
• Je stemt requirements en datastructuren af met business en stakeholders.
• Je werkt mee aan de opzet van een Gold-laag / data product en validatie van data.
• Power BI kan occasioneel gebruikt worden voor verificatie van data.

Skills

Data Engineer

PySpark

Performance optimization

Lakehouse

Medallion arch

Microsoft Fabric

Databricks

Dutch language

Tools

Databricks

Spark

Microsoft Fabric

Job description

Onze klant is een grote, groeiende Belgische organisatie die volop investeert in de verdere uitbouw van haar dataomgeving. Binnen het interne datateam wordt gewerkt aan een modern dataplatform in Microsoft Fabric, opgebouwd volgens een lakehouse- en medallionarchitectuur.

Om een aantal belangrijke trajecten te versnellen zoeken ze uitbreiding in het data-team die snel operationeel kan worden en mee bouwt aan de verdere ontsluiting, verwerking en structurering van data.

Takenpakket

Hier werk je mee aan de verdere uitbouw van het dataplatform in Microsoft Fabric. De nadruk ligt duidelijk op data engineering, aangevuld met een stukje data-analyse en validatie.

Je ontsluit verschillende databronnen richting de Bronze-laag en bouwt robuuste pipelines om data verder te verwerken en verrijken richting Silver. Daarbij bewaak je datakwaliteit, performantie en schaalbaarheid en zorg je ervoor dat pipelines betrouwbaar en onderhoudbaar opgebouwd worden.

Daarnaast denk je kritisch mee over mappings, businessregels en datastructuren. Wanneer requirements of brondata niet volledig duidelijk zijn, stem je actief af met de business en andere stakeholders in plaats van zelf assumpties te maken.

Binnenkort start het team ook met de verdere uitbouw van een eerste Gold-laag / data product. Bij verlenging van de opdracht bestaat de mogelijkheid om ook hier verder aan mee te werken.

Power BI kan occasioneel gebruikt worden om analyses uit te voeren en data te valideren, maar vormt niet de kern van de opdracht.

• Sterke ervaring als Data Engineer
• Sterke kennis PySpark, inclusief performanceoptimalisatie
• Ervaring met lakehouse- en medallionarchitecturen
• Ervaring met Microsoft Fabric is een sterke plus
• Sterke ervaring met Databricks, Spark of gelijkaardige moderne dataplatformen is ook een plus
• Je werkt in het Nederlands

Je mag rekenen op:

• initiële looptijd van ongeveer 3 maanden (grote mogelijkheid tot verlenging)