Databricks Data Engineer: End-to-End Lakehouse Pipelines

De Cronos Groep; Kontich; On-site; EUR 65,000 - 90,000; Full time

Benefits offered by this job

Gratis warm buffet

Dakterras & koffie

Cinemazaal & games

Padelvelden

Workation

Bike Challenge

Personal Development Plan

Job summary

EpicData zoekt een Databricks Data Engineer in België, tussen Brussel en Antwerpen. Je bouwt end-to-end lakehouse-platformen op Databricks, meestal op Azure, maar ook op AWS of GCP, en vertaalt businessvragen naar schaalbare dataoplossingen.

Je combineert sterke technische vaardigheden met business-inzicht, werkt aan ingestie, transformaties in PySpark, governance via Unity Catalog en Delta Lake, en levert data die analyses en dashboards mogelijk maken in Power BI of Databricks SQL.

Qualifications

• Drie jaar ervaring of meer als Data Engineer, met hands-on Databricks
• Diepgaande kennis van Apache Spark, Delta Lake en Unity Catalog
• Kennis van de volledige data lifecycle: modellering, ETL/ELT tot governance
• Kennis van Kimball dimensionele modellen en lakehouse-architecturen
• SQL, Python en PySpark als kernvaardigheden
• Ervaring met een cloudplatform (bij voorkeur Azure) en ADLS; dbt is een plus
• Databricks Certified Data Engineer Associate/Professional is een plus
• Goede communicatie in Nederlands en Engels

Responsibilities

• Data toegankelijk maken op Databricks door robuuste batch- en streamingpipes te bouwen
• Transformaties ontwikkelen in PySpark en Spark SQL boven Delta-tabellen
• Beheren van medallion-architectuur in Unity Catalog en Delta Sharing
• Datamodellen ontwerpen voor Databricks SQL en Power BI
• Samenwerken met klanten en teams als technisch aanspreekpunt

Skills

Databricks

Apache Spark

SQL

Python

PySpark

Unity Catalog

Delta Lake

Azure Data Factory

dbt

English

Dutch

Education

Databricks Certified Data Engineer Associate/Professional

Tools

Lakeflow Declarative Pipelines

Auto Loader

Structured Streaming

Delta Live Tables

Unity Catalog

Delta Sharing

Azure Data Factory

Databricks Asset Bundles

dbt

Git

Azure DevOps

GitHub

Job description

EpicData zoekt een Databricks Data Engineer in België, tussen Brussel en Antwerpen. Je bouwt end-to-end lakehouse-platformen op Databricks, meestal op Azure, maar ook op AWS of GCP, en vertaalt businessvragen naar schaalbare dataoplossingen.

Je combineert sterke technische vaardigheden met business-inzicht, werkt aan ingestie, transformaties in PySpark, governance via Unity Catalog en Delta Lake, en levert data die analyses en dashboards mogelijk maken in Power BI of Databricks SQL.