Vacature Data Engineer – Microsoft Fabric

Katholiek Onderwijs Vlaanderen vzw; Etterbeek; On-site; EUR 70,000 - 100,000; Full time

Job summary

Katholiek Onderwijs Vlaanderen vzw zoekt een Data Engineer – Microsoft Fabric in Brussel voor het ICT-team van de afdeling Ondersteunende diensten. Je werkt aan een intern dataplatform, verzamelt gegevens, bouwt datapijplijnen en modellen voor Power BI-rapportage, en waarborgt datakwaliteit en beveiliging.

Je werkt met Microsoft Fabric, Python, PySpark en SQL, en vertaalt bedrijfsbehoeften naar technische oplossingen terwijl je bijdraagt aan monitoring, deployment en documentatie.

Qualifications

• Minstens vijf jaar ervaring binnen ICT, met data engineering of datagedreven toepassingen.
• Zelfstandige uitvoering van opdrachten met afstemming waar nodig.
• Aantoonbare ervaring met Microsoft Fabric en pipelines, notebooks, lakehouses/warehouses.
• Grondige kennis van Python en onderhouden, goed testbare code schrijven.
• Kennis van datastructuren, functies, modules, foutafhandeling en logging.

Responsibilities

• Koppelen van interne toepassingen, databases en API's aan het dataplatform.
• Ontwikkelen en onderhouden datapijplijnen en datatransformaties in Microsoft Fabric.
• Bouwen van datasets en datamodellen voor Power BI-rapportering.
• Beheren van laadprocessen en rekening houden met wijzigingen in bronsystemen.
• Toepassen van toegangsrechten, beveiligingsafspraken en CI/CD.

Skills

Microsoft Fabric

Python

PySpark

SQL

Data modelling

ETL/ELT

Git

Power BI

Tools

Git

Job description

Ben je technisch sterk en wil je meebouwen aan een betrouwbaar dataplatform? Werk je graag gestructureerd en krijg je energie van data-integratie, dataverwerking en het ontwikkelen van duurzame technische oplossingen? Dan is deze functie iets voor jou.
Katholiek Onderwijs Vlaanderen is op zoek naar een Data Engineer – Microsoft Fabric om het ICT-team binnen de afdeling Ondersteunende diensten te versterken. Je werkt mee aan de verdere uitbouw van een intern dataplatform in Microsoft Fabric. Dat platform moet onze diensten betrouwbare gegevens bieden waarmee ze rapporten en analyses kunnen maken in Power BI.
We zoeken een gedreven collega om in de afdeling Ondersteunende diensten in Brussel aan de slag te gaan als voltijds Data Engineer – Microsoft Fabric. De functie kan worden ingevuld op mediorniveau.

Je bouwt en onderhoudt de technische gegevensketen: van het ophalen van gegevens uit interne toepassingen tot het beschikbaar stellen van bruikbare datasets voor rapportering.

Je werkt met Microsoft Fabric, Python, PySpark en SQL. Je zorgt ervoor dat gegevens correct worden verwerkt, dat verwerkingen betrouwbaar verlopen en dat oplossingen goed onderhoudbaar zijn.

Samen met ICT-collega's en de betrokken diensten bespreek je welke gegevens nodig zijn en hoe ze moeten worden ge nterpreteerd. Je vertaalt die afspraken naar technische oplossingen. De diensten bepalen de inhoud van hun rapportering; jij zorgt voor de databasis waarop zij kunnen vertrouwen.

Concreet bestaat je takenpakket hoofdzakelijk uit:

• Het koppelen van interne toepassingen, databases, bestanden en API's aan het dataplatform.
• Het ontwikkelen en onderhouden van datapijplijnen, notebooks en datatransformaties in Microsoft Fabric.
• Het bouwen van gestructureerde datasets en datamodellen die geschikt zijn voor gebruik in Power BI.
• Het opzetten van volledige en incrementele laadprocessen, rekening houdend met wijzigingen in bronsystemen.
• Het controleren van de gegevenskwaliteit en het samen met betrokken collega's onderzoeken van afwijkingen.
• Het bewaken van de dagelijkse werking via monitoring en logging.
• Het oplossen van fouten en het verbeteren van prestaties en capaciteitsgebruik.
• Het toepassen van toegangsrechten en beveiligingsafspraken.
• Het werken met versiebeheer, tests en gecontroleerde deployments.
• Het documenteren van gegevensstromen, verwerkingsregels en technische keuzes.
• Het afstemmen met ICT-collega's en medewerkers uit de verschillende diensten.
• Het bijdragen aan de verdere uitbouw en verbetering van het interne dataplatform.

Wil je meebouwen aan een betrouwbaar en toekomstgericht dataplatform binnen onze organisatie, dan verwachten wij dat je:

• minstens vijf jaar ervaring hebt binnen ICT, met relevante ervaring in data engineering of de ontwikkeling van datagedreven toepassingen;
• zelfstandig opdrachten kunt uitwerken en weet wanneer afstemming nodig is;
• aantoonbare ervaring hebt met Microsoft Fabric en zelf oplossingen hebt gebouwd en in gebruik genomen met pipelines, notebooks, lakehouses of warehouses;
• grondige kennis hebt van Python en onderhoudbare en testbare code kunt schrijven;
• datastructuren, functies, modules, foutafhandeling en logging beheerst;
• API-integraties kunt ontwikkelen en bestaande code kunt analyseren, debuggen en verbeteren;
• sterke kennis hebt van SQL en complexe queries en datatransformaties kunt schrijven en optimaliseren;
• praktische kennis hebt van PySpark en gegevens met Spark kunt verwerken;
• begrijpt hoe je bij grotere datavolumes rekening houdt met prestaties en efficiëntie;
• kennis hebt van datamodellering en ETL/ELT;
• vertrouwd bent met begrippen zoals feiten, dimensies, detailniveaus en historisering;
• ervaring hebt met Git en met het testen van code en gegevensverwerkingen;
• gestructureerd, analytisch en nauwkeurig werkt;
• helder communiceert en technische informatie begrijpelijk kunt toelichten;
• vlot kunt samenwerken met collega's uit verschillende diensten;
• initiatief neemt en oplossingsgericht denkt;
• een goede beheersing hebt van het Nederlands en voldoende Engels kent om technische documentatie te gebruiken en professioneel te overleggen;
• de missie en visie van Katholiek Onderwijs Vlaanderen onderschrijft.

Een relevante Microsoft Fabric-certificering, zoals Microsoft Certified: Fabric Data Engineer Associate (DP-700), is een pluspunt. Kennis van Power BI en semantische modellen is eveneens een pluspunt, net als ervaring met geautomatiseerde deployments en Azure-datadiensten.

Database, ELT, SQL, API, Datastructuur, SEN, Storage, Versiebeheer, Datamodellering, Samenwerken, Informatietechniek, Pijpleiding, ETL, Engineering, Monitoring, Git, Microsoft BI, Python, Onderwijs, Schrijven, Engelse taal, Apache Spark, Onderzoek, Nederlands, Fabric