Data Engineer — Databricks & Datalab Architect (Remote)

Ministerie van Volksgezondheid, Welzijn en Sport; Den Haag; On-site; EUR 70,000 - 90,000; Full time

Benefits offered by this job

IKB

Thuiswerken mogelijk

Ontwikkelingskansen

Ov-chipkaart

Job summary

Ministerie van Volksgezondheid, Welzijn en Sport zoekt een Data Engineer die data ontsluit en betrouwbare pipelines bouwt in Databricks. Je werkt met Python en SQL en zorgt voor veilige, AVG-conforme data in lijn met overheidsstandaarden.

Je werkt nauw samen met directies en externe beheerders om data beschikbaar te maken voor diverse domeinen binnen VWS. Je levert een bijdrage aan de overgang naar een data mesh en denkt mee over API’s en opzet van een robuuste data-infrastructuur binnen het VWS

Qualifications

• Ervaring met Databricks, Python en SQL (kennis van PySpark is een pré).
• Kennis van data-pipelines en het werken met datasets.
• Ervaring met code reviews en het waarborgen van codekwaliteit.
• Ervaring met werken binnen een overheidscontext en met bijbehorende kaders is een pré.

Responsibilities

• Bouwen en onderhouden van pipelines in Databricks met Python en SQL.
• Zorgen voor betrouwbare, veilige en AVG-proof data volgens overheidsstandaarden.
• Diffusie en ontsluiting van data naar diverse domeinen zoals HR, subsidies, inkoop en financiën.
• Draagt bij aan de ontwikkeling van het Datalab en (data mesh) initiatieven.

Skills

Databricks

Python

SQL

Azure

Data pipelines

Code reviews

Tools

Power BI

ADF

Databricks (ops)

Job description

Ministerie van Volksgezondheid, Welzijn en Sport zoekt een Data Engineer die data ontsluit en betrouwbare pipelines bouwt in Databricks. Je werkt met Python en SQL en zorgt voor veilige, AVG-conforme data in lijn met overheidsstandaarden.

Je werkt nauw samen met directies en externe beheerders om data beschikbaar te maken voor diverse domeinen binnen VWS. Je levert een bijdrage aan de overgang naar een data mesh en denkt mee over API’s en opzet van een robuuste data-infrastructuur binnen het VWS