Data Platform Engineer: Python & PySpark

United States Digital Space LLC; Amsterdam; Hybrid; EUR 52,000 - 74,000; Full time

Benefits offered by this job

Salarisschaal € 4.665 - € 6.665

Vaste eindejaarsuitkering

Internetvergoeding

NS Business Card

29 vakantiedagen + 1 feestdag

Premie vrij pensioen

Opleidingsmogelijkheden

Hybride werken vanuit Amsterdam

Job summary

BeFrank zoekt een ervaren software engineer op het snijvlak van softwareontwikkeling en data. Je bouwt robuuste Python-applicaties en datapipelines, automatiseert processen en zet CI/CD in, zodat kwaliteit vanaf het begin in het ontwerp zit.

Je werkt in een klein team met directe invloed op beslissingen, en onderhoudt data-platforms met PySpark en Delta Lake. Er is ruimte voor eigen verantwoordelijkheid en initiatieven binnen de data/engineering context.

Qualifications

• Je hebt ervaring met Python en PySpark en schrijft robuuste productiewaardige datapipelines.
• Kennis van Delta Lake, data- en schema-evolutie en partitionering is een plus.
• Je ontwerpt en implementeert CI/CD-pipelines en teststrategieën in Azure DevOps.

Responsibilities

• Schrijf productiewaardige datapipelines in Python en PySpark volgens medallion-architectuur.
• Ontsluit data uit bronsystemen zoals relationele/NoSQL databases, Blob/S3, REST API's, SFTP.
• Ontwerp en implementeer datakwaliteitsvalidaties en tests, integreer in CI/CD.

Skills

Python

PySpark

Delta Lake

CI/CD

Data modeling

Education

HBO/WO werk- en denkniveau

Tools

Azure DevOps

Delta Lake

Job description

BeFrank zoekt een ervaren software engineer op het snijvlak van softwareontwikkeling en data. Je bouwt robuuste Python-applicaties en datapipelines, automatiseert processen en zet CI/CD in, zodat kwaliteit vanaf het begin in het ontwerp zit.

Je werkt in een klein team met directe invloed op beslissingen, en onderhoudt data-platforms met PySpark en Delta Lake. Er is ruimte voor eigen verantwoordelijkheid en initiatieven binnen de data/engineering context.