Data Engineer: Microsoft Fabric & PySpark Pipelines

Jobat; Tessenderlo-Ham; Sur place; EUR 65 000 - 95 000; Plein temps

Résumé du poste

Jobat werkt aan een groeipad voor een Belgische organisatie die haar dataomgeving verder uitbouwt met een modern dataplatform in Microsoft Fabric. De focus ligt op data engineering, aangevuld met data-analyse en validatie.

Je ontsluit databronnen naar de Bronze-laag en bouwt robuuste pipelines richting Silver, bewaakt kwaliteit, prestaties en schaalbaarheid en zorgt voor onderhoudbare dataflows. Daarnaast denk je mee over mappings en datastructuren en stemt af met business stakeholders waar

Responsabilités

• Hier werk je mee aan de verdere uitbouw van het dataplatform in Microsoft Fabric. De nadruk ligt duidelijk op data engineering, aangevuld met een stukje data-analyse en validatie.
• Je ontsluit verschillende databronnen richting de Bronze-laag en bouwt robuuste pipelines om data verder te verwerken en verrijken richting Silver.
• Daarbij bewaak je datakwaliteit, performantie en schaalbaarheid en zorg je ervoor dat pipelines betrouwbaar en onderhoudbaar opgebouwd worden.
• Daarnaast denk je kritisch mee over mappings, businessregels en datastructuren. Wanneer requirements of brondata niet volledig duidelijk zijn, stem je actief af met de business en andere stakeholders in plaats van zelf assumpties te maken.
• Binnenkort start het team ook met de verdere uitbouw van een eerste Gold-laag / data product. Bij verlenging van de opdracht bestaat de mogelijkheid om ook hier verder aan mee te werken.
• Power BI kan occasioneel gebruikt worden om analyses uit te voeren en data te valideren, maar vormt niet de kern van de opdracht.

Description du poste

Jobat werkt aan een groeipad voor een Belgische organisatie die haar dataomgeving verder uitbouwt met een modern dataplatform in Microsoft Fabric. De focus ligt op data engineering, aangevuld met data-analyse en validatie.

Je ontsluit databronnen naar de Bronze-laag en bouwt robuuste pipelines richting Silver, bewaakt kwaliteit, prestaties en schaalbaarheid en zorgt voor onderhoudbare dataflows. Daarnaast denk je mee over mappings en datastructuren en stemt af met business stakeholders waar