Data Engineer

Macaw; Randstad; Hybrid; EUR 70,000 - 95,000; Full time

Benefits offered by this job

Mobiliteitsvergoeding

29 vakantiedagen

Opleidingsbudget

Flexibele werktijden

Kantoor met leuke extras

Job summary

Macaw zoekt een Data Engineer die infrastructuur en pipelines bouwt voor klantprojecten. Je ontsluit bronsystemen, ontwerpt robuuste laadprocessen en modelleert data zodat collega’s direct verder kunnen.

Je werkt met Microsoft Fabric, Azure Databricks en Azure Data Factory en werkt in een team van data engineers, Fabric- en Power BI-consultants. Ervaring met DP-700 is een grote plus en Duits is welkom.

Qualifications

• Minimaal 3 jaar ervaring als data engineer of vergelijkbaar werk in data-domein.
• Ervaring met grote datasets en kostenbewuste inrichting van data-pipelines.
• DP-700-certificering is een plus; bereid deze in het eerste jaar te halen.

Responsibilities

• Ontsluiten van bronsystemen (Azure SQL, Dataverse, SAP, API's) en bouwen van betrouwbare laadprocessen.
• Bouwen van data pipelines en notebooks in Fabric en Azure Databricks.
• Inrichten van Lakehouses en Warehouses in Fabric volgens medallion-architectuur (bronze, silver, gold).
• Modelleren van data tot overzichtelijke sterschema's ten behoeve van Power BI-consultants.
• Beheer van klantomgeving in Azure DevOps of Git; CI/CD-pipelines en release-afspraken.
• Monitoren en optimaliseren van pipelines op doorlooptijd, betrouwbaarheid en kosten.
• Documenteren van oplossingen en zorgen voor overdracht aan klanten en collega's.
• Begeleiden van junior collega's via code reviews en pair programming.
• Communiceren in NL en EN; Duits is een grote plus.

Skills

SQL

Python

PySpark

Fabric

Azure Databricks

Azure Data Factory

ETL

Data Modeling

Agile

Tools

Azure DevOps

Git

CI/CD

Power BI

Job description

Data wordt pas waardevol als het betrouwbaar, tijdig en bruikbaar op de juiste plek staat. Als Data Engineer bij Macaw bouw je precies dat: de fundering onder de rapportages, modellen en AI-toepassingen van onze klanten. Je ontsluit bronsystemen, bouwt robuuste laadprocessen en modelleert data zo dat anderen er direct mee verder kunnen. Wij werken met Microsoft-technologie, dus je gaat aan de slag met Microsoft Fabric, Azure Databricks en Azure Data Factory. Je wordt onderdeel van het team Data Solutions & Insights (DSI), tussen data engineers, Fabric- en Power BI-consultants en data-architecten die elkaar scherp houden.

Jouw dagelijkse werkzaamheden hangen af van twee zaken: jouw klantprojecten en jouw interesse in interne initiatieven. De klantprojecten variëren enorm, van kleinere organisaties waar je zelfstandig het hele data-platform bouwt, tot grote ondernemingen waar je deel uitmaakt van een projectteam en samenwerkt met projectmanagers, solution architects en andere engineers. Onze klanten bevinden zich met name in Nederland en Duitsland.

Onze interne projecten draaien om jouw interesse: ben je gepassioneerd door Microsoft Fabric, AI en Copilot, Azure Databricks, of wil je je verdiepen in data governance en datakwaliteit? Er zijn veel interne initiatieven waaraan je kunt deelnemen en waarbij je de kans krijgt om ook op andere gebieden je kennis verder te ontwikkelen. Denk aan ons Smart Data Platform - een data-platform-accelerator die we intern ontwikkelen en onderhouden, met referentie-architecturen, standaardoplossingen en herbruikbare laadpatronen - of Project ARA, onze accelerator in Microsoft Fabric om klantprojecten snel op gang te brengen.

Wat je doet als Data Engineer

We zoeken collega's die houden van uitdaging en variatie. Elke opdracht is uniek. Je bent bekend met verschillende architecturen en technieken en je begint patronen te herkennen bij verschillende klanten, waardoor je kennis en ervaring van de ene klant kunt toepassen bij de volgende.

In plaats van verzoeken letterlijk op te volgen, probeer je het daadwerkelijke probleem te begrijpen en kom je op basis daarvan met een goede oplossing.

Je werkt zelfstandig aan jouw deel van het platform en trekt op tijd aan de bel als je vastloopt. Je begeleidt junior collega's in code reviews en neemt hen mee in de keuzes die je maakt.

Je werkt georganiseerd en gestructureerd, want code en pipelines zonder structuur en consistentie zijn moeilijk te begrijpen, te testen en over te dragen.

• Ontsluiten van bronsystemen (Azure SQL, Dataverse, SAP, API's, files) en het bouwen van betrouwbare, herstartbare laadprocessen.
• Bouwen van data pipelines en notebooks in Microsoft Fabric, Azure Data Factory en/of Azure Databricks.
• Inrichten van Lakehouses en Warehouses in Fabric volgens een medallion-architectuur (bronze, silver, gold).
• Modelleren van data tot overzichtelijke, goed presterende sterschema's waar onze Power BI-consultants direct mee verder kunnen. Voor de implementatie gebruik je SQL, Python, PySpark of Spark SQL.
• Beheren van de klantomgeving in Azure DevOps of Git: deployment scripts, CI/CD-pipelines en release-afspraken horen bij jouw werk.
• Monitoren, optimaliseren en troubleshooten van bestaande pipelines - op doorlooptijd, betrouwbaarheid én kosten (Fabric capacity, Databricks clusters).
• Vastleggen van je oplossing: documentatie, naming conventions en een overdracht waar de klant en je collega's echt mee vooruit kunnen.
• Begeleiden van junior collega's via code reviews en pair programming.
• Je spreekt vloeiend Nederlands en kunt professioneel communiceren in het Engels. Een goede beheersing van de Duitse taal is een grote plus.
• Je hebt 3 tot 6 jaar werkervaring als data engineer of in een vergelijkbare rol binnen het data-domein.
• Je bent sterk in SQL en werkt comfortabel met Python of PySpark voor datatransformaties.
• Je hebt hands-on ervaring met minimaal één van: Microsoft Fabric, Azure Databricks, Azure Data Factory of Azure Synapse Analytics - en je wilt je verbreden naar de andere.
• Je kent de principes van datamodellering (dimensioneel / Kimball, sterschema, 3NF) en weet wanneer je ervan afwijkt.
• Je hebt ervaring met grote datasets en weet hoe je verwerking efficiënt en kostenbewust inricht.
• Je werkt met Git en Azure DevOps en bent bekend met CI/CD voor data-platformen.
• Je bent vertrouwd met Agile/Scrum-werkwijzen.
• Je hebt bij voorkeur de DP-700 (Fabric Data Engineer Associate) certificering, of je bent bereid die in je eerste jaar te halen. DP-600, DP-203 of een Databricks Data Engineer-certificering zijn een plus.
• Ervaring met Microsoft Purview, datakwaliteitsframeworks of Real-Time Intelligence (Eventhouse, KQL, Event Streams) is een pré.
• Je blijft op de hoogte van de nieuwste Microsoft-ontwikkelingen zoals Copilot in Fabric en agentic AI, en bent enthousiast om hiermee te experimenteren.

Wat kan je van Macaw verwachten

Never gonna give you up, never gonna let you down - We hebben een fijn team met veel ervaren collega's die je zullen helpen als iets te ver buiten je comfortzone ligt.

• Een mooi salaris en een mobiliteitsvergoeding voor een leaseauto en/of NS Businesscard.
• 29 vakantiedagen (tot 33 wanneer we onze targets halen).
• Toegang tot een ruim opleidingsbudget en veel ruimte voor persoonlijke ontwikkeling.
• Flexibele werktijden (32-40). De meesten van ons zijn 1-3 dagen op kantoor, een paar dagen thuis of bij de klant.
• Een prachtig, goed verbonden kantoor met leuke extras zoals een pooltafel, tafeltennis en een Xbox (ja, we zijn Microsoft-fans).