Senior Data Engineer: Cloud Data Platform & Open Data

Ministerie van Sociale Zaken en Werkgelegenheid (SZW)

Den Haag

On-site

EUR 70,000 - 110,000

Full time

5 days ago

Be an early applicant

Application generator

Stand out for this role — generate a tailored resume and cover letter in about a minute.

Get past ATS filters

Job summary

Ministerie van Sociale Zaken en Werkgelegenheid (SZW) zoekt een senior Data Engineer die hands-on een centrale, onderhoudbare data-infrastructuur bouwt op het Cloud Data Platform. Je werkt met publieke databronnen om deze ontsloten en herbruikbaar te maken voor interne toepassingen en analyses.

Daarbij ontwerp en implementeer je ingestiestromen en transformaties in Azure/Databricks, met aandacht voor kwaliteit, foutafhandeling en monitoring, en stem je af met data-afnemers en architectuurteams

Responsibilities

Inventariseren van relevante publieke databronnen en behoeften van afnemende teams.
Ontwerpen en realiseren robuuste data-ingestie voor publieke bronnen naar het Cloud Data Platform, onder meer API-gebaseerde en andere open databronnen.
Opschonen, transformeren, verrijken en structureren van data voor hergebruik.
Inrichten van herhaalbare data-pipelines in Azure/Databricks, inclusief foutafhandeling, logging, monitoring en herstelbaarheid.
Beschikbaar maken van datasets voor afnemers in verschillende gebruiksscenario’s zoals analyses, dashboards en AI-toepassingen.
Bijdragen aan afspraken over datamodellering, metadata, documentatie, kwaliteit en beheer.
Afstemmen met betrokken stakeholders binnen CIV en daarbuiten.
Mede bepalen van technische keuzes en richting binnen het team en kennisoverdracht aan teamleden.