Data engineer migratie (datalab)

Ministerie van Volksgezondheid, Welzijn en Sport (kerndepartement); Den Haag; On-site; EUR 65,000 - 90,000; Full time

Job summary

Het Datalab van het Ministerie van Volksgezondheid, Welzijn en Sport (VWS) zoekt een ervaren Data Engineer migratie (datalab) die ETL/ELT-processen ontwerpt en implementeert in Azure Databricks. Je werkt aan het centraliseren van data, semantische modellen en API-koppelingen voor een robuuste data-omgeving en BI-voorzieningen.

Je onderhoudt het Azure dataplatform in samenwerking met de beheerpartij en levert een belangrijke bijdrage aan data-innovatie en AI-initiatieven voor operationele teams.

Qualifications

• Minimaal 3 jaar ervaring als data engineer op Microsoft Azure.
• Aantoonbare ervaring met Databricks (Delta Lake en Unity Catalog).
• Uitstekende programmeervaardigheden in Python; aantoonbare ervaring met PySpark.
• Minimaal 3 jaar ervaring met het opzetten van ETL/ELT-processen en het bouwen en orkestreren van pipelines.
• Minimaal 3 jaar ervaring met datamodellering, conceptueel en dimensioneel, en met het ontwerpen en onderhouden van semantische modellen.
• Aantoonbare ervaring met API-integraties en het ontsluiten van bronsystemen.
• Aantoonbare ervaring met CI/CD, versiebeheer en infrastructure as code (Azure DevOps, Terraform).
• In het bezit van Azure DP-certificeringen.
• Minimaal 32 uur per week beschikbaar.
• HBO/WO werk- en denkniveau; analytisch en nauwkeurig.
• De Nederlandse taal in woord en geschrift beheerst.

Responsibilities

• Ontwerpen en implementeren ETL/ELT-processen die data van bron tot productielaag in het data lake brengen met Python en PySpark.
• Onderhoud van het Azure dataplatform samen met de beheerpartij van de cloudomgeving en fungeren als aanspreekpunt.
• Zorgen voor de uitdagingen rondom datatransformaties en schema-updates; meedenken over doorontwikkeling en nieuwe initiatieven.
• Verkennen van hoe AI kan bijdragen aan het verlagen van de werklast bij operationele teams.
• Zorgdragen voor stabiele Power BI-rapportages op basis van semantische modellen.

Skills

Azure

Databricks

Python

PySpark

ETL/ELT pipelines

Datamodellering

API-integraties

CI/CD

Azure DevOps

Terraform

Education

HBO/WO niveau

Tools

Delta Lake

Unity Catalog

Azure Data Factory

ADLS

Terraform

Azure DevOps

Job description

Voor onze klant Volksgezondheid, Welzijn en Sport Kerndepartement zijn wij op zoek naar een Data engineer migratie (datalab).

Bedrijf informatie

Het Datalab van VWS is de omgeving waarin de directies van VWS hun data-initiatieven kunnen onderbrengen. Het platform is gebouwd op Microsoft Azure met Databricks als centrale component. Voor het onderhoud van de bestaande omgeving en voor een aantal aanstaande ontwikkelingen, waaronder de migratie naar een vernieuwd platform en het via API ontsluiten van bronsystemen, zoeken wij een ervaren data engineer. De data engineer is binnen het team de technische ruggengraat voor de complexere datavraagstukken.

Je ontwerpt en implementeert ETL/ELT-processen die data van bron tot productielaag in het data lake brengen met Python en PySpark, en je ontwerpt en onderhoudt de centrale semantische modellen, zodat datastructuren en definities op elkaar aansluiten en er stabiele Power BI-rapportages op gebouwd kunnen worden. Je onderhoudt het Azure dataplatform samen met de beheerpartij van de cloudomgeving en bent daarvoor het aanspreekpunt. Je bent binnen het team het aanspreekpunt voor de moeilijkste datatransformaties en schema-updates, denkt mee over de aanpak van de doorontwikkeling en nieuwe initiatieven, en verkenter actief hoe AI kan bijdragen aan het verlagen van de werklast bij de operationele teams.

Kennis, ervaring, competenties en vaardigheden

• Minimaal 3 jaar aantoonbare werkervaring heeft als data engineer op Microsoft Azure
• Aantoonbare ervaring heeft met Databricks (onder meer Delta Lake en Unity Catalog)
• uitstekende programmeervaardigheden heeft in Python en aantoonbare ervaring met PySpark
• Minimaal 3 jaar ervaring heeft met het opzetten van ETL/ELT-processen en het bouwen en orkestreren van pipelines
• Minimaal 3 jaar ervaring heeft met datamodellering, conceptueel en dimensioneel, en met het ontwerpen en onderhouden van semantische modellen
• Aantoonbare ervaring heeft met API-integraties en het ontsluiten van bronsystemen
• Aantoonbare ervaring heeft met CI/CD, versiebeheer en infrastructure as code (Azure DevOps, Terraform)
• In het bezit is van een of meer relevante Azure datacertificeringen (de DP reeks binnen de azure certificaten)
• Ervaring heeft met platformmigraties, van on-premises of legacy naar een cloud dataplatform, is een pre
• Minimaal 5 jaar aantoonbare ervaring heeft met het werken in een agile omgeving
• Minimaal 32 uur per week beschikbaar is
• HBO/WO werk- en denkniveau heeft in een bèta- of ICT-richting, analytisch denkt en nauwkeurig werkt
• De Nederlandse taal in woord en geschrift beheerst, klantgericht en organisatiesensitief is, goed samenwerkt in teamverband en zich goed kan verplaatsen in de gebruikers.

Voor deze opdracht zoeken we een ervaren data engineer die:

Opdracht informatie

Opdrachtgever Nederland gezond en wel. Dat is het motto van het ministerie van Volksgezondheid, Welzijn en Sport (VWS). Zorg voor ouderen en jongeren en voor mensen met een lichamelijke ofverstandelijke handicap.De directie Organisatie, Bedrijfsvoering en Personeel (OBP) is eindverantwoordelijk voor de levering van bedrijfsvoeringdiensten aan het kerndepartement en aan een aantal niet tot de kern behorende diensten van VWS. Binnen OBP/Afdeling IV is het VWS Datalab belegd. Het Datalabbeheert en ontwikkelt het Azure dataplatform waarop de directies van VWS hun data-initiatieven onderbrengen, en levert daarmee de basis voor data-analyses, rapportages en datagedrevenwerken binnen het departement.

Ministerie van Volksgezondheid, Welzijn en Sport VWS werkt aan een gezond, fit en veerkrachtig Nederland. Ruim 6.700 mensen zetten zich in voor goede en betaalbare zorg en ondersteuning, een gezonde levensstijl, voldoende beweging, (top)sportvoorzieningen en goede voeding. Ons werk is betekenisvol, wat maakt dat onze mensen hun baan écht leuk vinden. Dat zorgt voor een goede sfeer, waarbij je vrijheid hebt in je werk. We willen dat iedereen wordt gezien, gehoord en gewaardeerd in een veilige werkomgeving.

Het werk is nooit saai, want we moeten voortdurend vernieuwen en met oplossingen komen. Hierbij denken we niet alleen vanuit onszelf. We luisteren ook goed naar de mening van anderen. We vinden het daarom belangrijk dat jij jezelf kunt zijn en je mening durft te geven. Zo leren we van elkaar. Want we kunnen het niet alleen. We werken daarom samen met partners, andere ministeries, professionals uit de zorg en natuurlijk inwoners van Nederland.

Bij het beleidsdepartement van VWS werken ruim 2.000 mensen. Daarnaast werken nog eens 4.700 mensen bij de concernpartners van VWS. Zoals het Rijksinstituut voor Volksgezondheid en Milieu (RIVM), de Nederlandse Sportraad en de Inspectie Gezondheidszorg en Jeugd (IGJ). Ook zijn we verantwoordelijk voor een aantal zelfstandige bestuursorganen. Zoals het Zorginstituut, de Dopingautoriteit en het College Beoordeling Geneesmiddelen.

Ministerie van Volksgezondheid, Welzijn en Sport

Wat heb je nodig

• Kandidaat beschikt over minimaal HBO werk- en denkniveau (kan worden aangetoond dmv een afgeronde HBO opleiding en/of aantoonbare werkervaring van minimaal 3 jaar op HBO niveau)
• Kandidaat beschikt over minimaal 3 jaar aantoonbare werkervaring als data engineer op Microsoft Azure
• Kandidaat beschikt over aantoonbare kennis van en ervaring met Databricks, Python en PySpark
• Kandidaat beschikt over aantoonbaar minimaal 3 jaar kennis van en ervaring met datamodellering, ETL-processen en het bouwen van pipelines
• Kandidaat is minimaal 32 uur per week beschikbaar voor de duur van de opdracht

Wat wij bieden

• Mate waarin de kandidaat ervaring heeft met het werken in agile teams
• Mate waarin de kandidaat kennis heeft van het Azure dataplatform (Databricks, Delta Lake, Unity Catalog, Azure Data Factory, ADLS) en ervaring heeft met platformmigraties
• Mate waarin de kandidaat kennis heeft van datamodellering en semantische modellen, het opzetten van ETL/ELT-processen en het bouwen van pipelines met Python en PySpark, inclusief API-integraties
• Mate waarin de kandidaat beschikt over relevante certificeringen vanuit de DP reeks en aantoonbare ervaring met CI/CD, versiebeheer en infrastructure as code (Azure DevOps, Terraform)
• Mate waarin kandidaat beschikt over de gevraagde competenties en vaardigheden (toetsbaar in CV, motivatie en/of mogelijk gesprek)

Functie contact imformatie

• Een Nederlands CV (max 5 pagina's) in word formaat (inclusief voorletters, woonplaats, geboortedatum)
• Persoonlijke motivatie gericht op het functieprofiel
• Beschikbaarheid en geplande vakanties
• All-in uurtarief (incl. reiskosten, parkeerkosten en verblijf, excl. BTW)
• Deze functie is niet geschikt voor zzp’ers en daarom ontvangen wij graag CV’s van medewerkers die in loondienst zijn van een bedrijf waar zij geen eigenaar van zijn.