Senior Data Engineer • Azure Databricks • Data Engineering

Dceni

Den Haag

On-site

EUR 90,000 - 120,000

Part time

3 days ago

Be an early applicant

Application generator

Turn this role into an interview — a resume and cover letter built around what this employer wants.

Get past ATS filters

Job summary

Dceni zoekt een Senior Data Engineer om een centrale, herbruikbare data-oplossing te realiseren binnen een overheidsorganisatie in Den Haag. Je werkt hands-on aan het ontsluiten, verrijken en beschikbaar maken van publieke databronnen voor analyses, dashboards en AI-toepassingen.

Je werkt in een Data & AI-team op Azure met Databricks, ontwerpt en bouwt data-ingestie- en transformatiepipelines, en draagt bij aan kwaliteit, beheer en schaalbaarheid.

Qualifications

WO werk- en denkniveau vereist.
Minimaal 5 jaar ervaring als Data Engineer of vergelijkbare rol.
Ervaring met Azure Data Platform en Databricks, en data uit externe bronnen ontsluiten.

Responsibilities

Inventariseren van publieke databronnen en ontsluitingsmogelijkheden.
Inventariseren van behoeften van afnemende teams en applicaties.
Ontwerpen en realiseren van robuuste data-ingestie voor publieke en externe databronnen.
Opschonen, transformeren, verrijken en structureren van data voor hergebruik.
Inrichten van herhaalbare data-pipelines in Azure en Databricks.
Inrichten van foutafhandeling, logging, monitoring en herstelbaarheid.
Beschikbaar maken van datasets voor analyses, dashboards, AI-toepassingen en verdere dataverwerking.
Bijdragen aan datamodellering, metadata, documentatie, datakwaliteit en beheer.
Afstemmen met data-afnemers, architectuur, platformbeheer en andere betrokken teams.
Mede bepalen van technische keuzes en richting binnen het team.
Overdragen van kennis aan teamleden.

Skills

Data engineering

Azure Databricks

Python

SQL

Education

WO werk- en denkniveau

Tools

Azure Databricks

Azure Cloud

Job description

Wij zoeken een Senior Data Engineer voor het realiseren van een centrale, herbruikbare en beheersbare data-oplossing binnen een overheidsorganisatie. Je werkt hands-on aan het ontsluiten, verrijken en beschikbaar maken van publieke databronnen voor onder andere analyses, dashboards, AI-toepassingen en andere dataproducten.

Rol & context

Je werkt binnen een Data & AI-team aan een Cloud Data Platform op Microsoft Azure met onder andere Databricks. Je bouwt data-ingestie- en transformatiepipelines, helpt de technische basis neer te zetten voor nieuwe databronnen en afnemers en draagt bij aan technische keuzes rond kwaliteit, beheer en schaalbaarheid.

Werkzaamheden

Inventariseren van relevante publieke databronnen en technische ontsluitingsmogelijkheden
Inventariseren van behoeften van afnemende teams en applicaties
Ontwerpen en realiseren van robuuste data-ingestie voor publieke en externe databronnen
Opschonen, transformeren, verrijken en structureren van data voor hergebruik
Inrichten van herhaalbare data-pipelines in Azure en Databricks
Inrichten van foutafhandeling, logging, monitoring en herstelbaarheid
Beschikbaar maken van datasets voor analyses, dashboards, AI-toepassingen en verdere dataverwerking
Bijdragen aan datamodellering, metadata, documentatie, datakwaliteit en beheer
Afstemmen met data-afnemers, architectuur, platformbeheer en andere betrokken teams
Mede bepalen van technische keuzes en richting binnen het team
Overdragen van kennis aan teamleden

Eisen

WO werk- en denkniveau
Minimaal 5 jaar werkervaring als Data Engineer of in een vergelijkbare rol
Kennis van data-engineering in Microsoft Azure, waaronder het ontwerpen, bouwen en/of beheren van dataoplossingen en/of het werken met gangbare programmeer- en querytalen
Ervaring met het ontsluiten, combineren en/of verwerken van data uit externe bronnen binnen een Azure-omgeving, zoals API’s, databestanden en andere gegevensbronnen in verschillende formaten

Pré’s

Kennis van Azure Databricks, Spark, Python en SQL
Ervaring met het bouwen van robuuste, herhaalbare data-pipelines, inclusief monitoring, foutafhandeling en beheerbaarheid
Ervaring met het ontsluiten, opschonen, transformeren en beschikbaar maken van publieke of externe databronnen voor meervoudig intern gebruik
Ervaring binnen een overheidscontext of vergelijkbare complexe omgeving
Ervaring met het zelfstandig oppakken van complexe datavraagstukken
Ervaring met samenwerken met verschillende stakeholders, technisch richting geven en kennis overdragen
Ervaring en/of affiniteit met de organisatie van de opdrachtgever

Praktische informatie