Data Engineer – Lakehouse & Databricks Platform

Good Company; Rotterdam; On-site; EUR 70,000 - 90,000; Full time

Job summary

Good Company in Rotterdam zoekt een Data Engineer die deel uitmaakt van het datawarehouseteam binnen Data & BI. Je werkt aan het hart van het lakehouse-platform in Databricks en beheert end-to-end dataoplossingen.

Je combineert software engineering, cloudtechnologie en operationeel eigenaarschap en werkt nauw samen met BI- en Data Governance-teams aan betrouwbare, schaalbare data pipelines. Je bouwt data-ingestieprocessen, ontwerpt datawarehouse- en Delta Lake-patronen, en gebruikt IaC voor

Qualifications

• Sterke ervaring met data engineering en Databricks is vereist.
• Ervaring met Python en datawarehousing-methodes.
• Bekwaam in Agile werkwijze en kostenbewaking.

Responsibilities

• Bouwen, onderhouden en optimaliseren van data-ingestieprocessen met Python in Databricks.
• Ontwerpen en implementeren van datawarehouse- en Delta Lake-patronen zoals CDC, SCD Type 2, incremental loading en deduplicatie.
• Beheren van Databricks-componenten zoals Workflows, Unity Catalog en Compute Clusters, en onderhouden van Infrastructure as Code met Databricks Asset Bundles en OpenTofu/Terraform.
• Onderzoeken van nieuwe bron- en integratietypen en uitvoeren van proof-of-concepts.
• Bewaken van de betrouwbaarheid van productieomgevingen via monitoring, incidentanalyse, root-cause analyses en kostenbewaking.
• Zorgen voor kwaliteit via design- en code reviews, unit- en integratietesten en aanpak van technische schuld.
• Actief bijdragen aan Agile via backlog refinement, inschattingen en risicobeheer.

Skills

Python

Databricks

Delta Lake

CDC

SCD Type 2

Incremental loading

Deduplication

Workflows

Unity Catalog

Compute Clusters

Infrastructure as Code

Terraform

OpenTofu

Monitoring

Incident analysis

Root-cause analysis

Cost monitoring

Code reviews

Unit tests

Integration tests

Agile

Job description

Good Company in Rotterdam zoekt een Data Engineer die deel uitmaakt van het datawarehouseteam binnen Data & BI. Je werkt aan het hart van het lakehouse-platform in Databricks en beheert end-to-end dataoplossingen.

Je combineert software engineering, cloudtechnologie en operationeel eigenaarschap en werkt nauw samen met BI- en Data Governance-teams aan betrouwbare, schaalbare data pipelines. Je bouwt data-ingestieprocessen, ontwerpt datawarehouse- en Delta Lake-patronen, en gebruikt IaC voor