Data Platform Engineer—Python, PySpark, Delta Lake

NN GROUP N.V.; Amsterdam; Hybrid; EUR 52,000 - 74,000; Full time

Benefits offered by this job

Passend salaris o.b.v. 40 uur (€4.665-

Vaste eindejaarsuitkering

Prestatiebonus

Internetvergoeding

NS Business Card/ privé reizen

29 vakantiedagen + 1 persoonlijke dag

Premievrij pensioen

Opleidingsmogelijkheden

Vrijheid en verantwoordelijkheid

Hybride werken in Amsterdam

Job summary

BeFrank bouwt een modern dataplatform en zoekt een software engineer die complexe datavraagstukken oplost. Je schrijft robuuste Python-applicaties en datapipelines die analyses en AI mogelijk maken, en zorgt voor betrouwbare operaties op schaal.

Je werkt aan CI/CD, data-kwaliteitsvalidaties en het ontwerpen van een schaalbare architectuur met PySpark en Delta Lake. Hybride werken vanuit Amsterdam is mogelijk.

Qualifications

• Minimaal HBO/WO werk- en denkniveau met relevante ervaring als data engineer.
• Ervaring met Python, data pipelines en CI/CD in een enterprise omgeving.
• Kennis van Delta Lake, PySpark en schaalbare dataplatformen is vereist.

Responsibilities

• Productiewaardige datapipelines schrijven in Python en PySpark volgens de medallion-architectuur op Delta Lake.
• Data ontsluiten uit bronsystemen zoals relationele databases, NoSQL en API's.
• Unit, integratie en BDD-tests schrijven en in CI/CD in Azure DevOps integreren.
• Datakwaliteitsvalidaties ontwerpen en implementeren om dataproblemen vroegtijdig te signaleren.
• Samenwerken met data- en businessanalisten aan datamodellen en dataproducten.
• Technische oplossingen ontwerpen binnen de software/cloud architectuur van het dataplatform.

Skills

Python

PySpark

Delta Lake

CI/CD

Azure DevOps

Data pipelines

Education

HBO/WO werk- en denkniveau

Tools

Azure Synapse

Azure Data Factory

Azure Functions

Job description

BeFrank bouwt een modern dataplatform en zoekt een software engineer die complexe datavraagstukken oplost. Je schrijft robuuste Python-applicaties en datapipelines die analyses en AI mogelijk maken, en zorgt voor betrouwbare operaties op schaal.

Je werkt aan CI/CD, data-kwaliteitsvalidaties en het ontwerpen van een schaalbare architectuur met PySpark en Delta Lake. Hybride werken vanuit Amsterdam is mogelijk.