Senior Data Engineer – Azure Databricks and Lakehouse

All About Work; Amsterdam; On-site; EUR 90,000 - 130,000; Full time

Benefits offered by this job

Snelle uitbetaling 16 dagen

Geen relatie- of concurrentiebeding

CAO van opdrachtgever

Job summary

All About Work zoekt een senior data engineer voor een opdracht bij de Centrale Bank in Amsterdam. Je ontsluit data uit interne en externe bronnen en levert belangrijke financiële informatie aan operationele en analytische teams.

Je werkt in Azure Databricks met een focus op data-warehousing en medallion-architectuur in een BizDevOps-omgeving. Je werkt aan dataplatforms, notebooks, pipelines en CI/CD in Azure Cloud, met nadruk op data-integratie, modelling en testing.

Qualifications

• Minimaal 5 jaar aantoonbare werkervaring met Data Engineering in Azure Cloud.
• Minimaal 5 jaar aantoonbare ervaring met Python en PySpark.
• Minimaal 5 jaar aantoonbare ervaring met SQL in een enterprise omgeving.
• Minimaal 3 jaar aantoonbare ervaring met Databricks notebooks, pipelines en Unity Catalog.
• Minimaal 3 jaar aantoonbare ervaring met Infra-as-Code en Azure DevOps CI/CD pipelines.
• Minimaal 2 jaar aantoonbare ervaring met data lakehouses.
• Beschikbaarheid vanaf 1 december 2026 en minimaal 32 uur per week.

Responsibilities

• Ontwerpen, ontwikkelen en optimaliseren van data pipelines binnen Azure Databricks.
• Realiseren van data-ingestie-, transformatie- en verrijkingsprocessen met Python, PySpark en SQL.
• Inrichten en beheren van lakehouse-architecturen volgens medallion architectuur.
• Ontwikkelen en onderhouden van Databricks notebooks, workflows en Unity Catalog-structuren.
• Implementeren van Infrastructure as Code en CI/CD-processen binnen Azure DevOps.
• Kennis van dimensioneel modelleren.
• Opzetten en uitvoeren van unit-, integratie- en regressietesten.
• Toepassen van software engineering best practices, waaronder versiebeheer, code reviews, linting en security scanning.
• Samenwerken met data-engineers, analisten en platformteam om hoogwaardige data-oplossingen te realiseren.

Skills

Azure Databricks

Python

PySpark

SQL

Data pipelines

Infrastructure as Code

Azure DevOps

Unit testing

CI/CD

Git

Code linting

Security scanning

Databricks notebooks

Unity Catalog

Education

HBO denk- en werkniveau

Tools

Databricks notebooks

Unity Catalog

Azure DevOps

IaC tooling

Git

Job description

All About Work zoekt een senior data engineer voor een opdracht bij de Centrale Bank in Amsterdam. Je ontsluit data uit interne en externe bronnen en levert belangrijke financiële informatie aan operationele en analytische teams.

Je werkt in Azure Databricks met een focus op data-warehousing en medallion-architectuur in een BizDevOps-omgeving. Je werkt aan dataplatforms, notebooks, pipelines en CI/CD in Azure Cloud, met nadruk op data-integratie, modelling en testing.