Azure Data Engineer: Lakehouse & Governance Lead

HumanInTech; Brussel Hoofdstad; Hybrid; EUR 70,000 - 110,000; Full time

Benefits offered by this job

Hybrid work model

On-site in Brussels

Job summary

HumanInTech zoekt een ervaren data engineer voor de doorlopend ontwikkelde Azure-gedreven datapijplijnen en governance bij een Belgisch openbaarvervoerbedrijf. Je werkt aan moderne data-infrastructuur en self-service mogelijkheden voor business teams, met focus op Databricks Unity Catalog en Lakehouse-ontwerpen.

Je hebt minimaal 5 jaar ervaring, sterke kennis van Spark/PySpark, SQL en Python, en kunt complexe data-architectuur opleveren.

Qualifications

• Diploma in Computerwetenschappen / Data Engineering of een gerelateerd vakgebied.
• Minimaal 5 jaar ervaring in een vergelijkbare rol.
• Bewezen ervaring met Azure Databricks, Unity Catalog en Azure data-architectuur.
• Analytisch ingesteld, zelfstandig en teamgericht, met goede communicatieve vaardigheden.

Responsibilities

• Ontwerpen en ontwikkelen van data pipelines met Azure Data Factory, Databricks en Azure services.
• Implementeren van Data Lake, Delta Lake en Lakehouse-architecturen.
• Ontwikkelen en operationaliseren van nieuwe use cases voor rapportage, analytics en data science.
• Beheren van Databricks Unity Catalog, inclusief access management en governance.
• Ondersteunen van een self-service datastrategie en kostenbeheer.
• Monitoren van prestaties en kosten in Azure en Databricks; optimalisaties doorvoeren.
• Automatiseren van data-ingestie, transformatie en deployment processen.
• Samenwerken met data-analisten, data scientists en business stakeholders.
• Documenteren van dataflows, architectuur en best practices.

Skills

Azure Databricks

Azure Data Factory

Azure Storage

Azure SQL

Key Vault

Azure DevOps

Spark

PySpark

Delta Lake

SQL

Python

Monitoring

Performance tuning

CI/CD

REST API

AMQP

Education

Bachelor in Computer Science, Data Engineering or related field

Tools

Databricks Unity Catalog

Azure Databricks

Azure Data Factory

Azure Monitor

Terraform / IaC

Job description

HumanInTech zoekt een ervaren data engineer voor de doorlopend ontwikkelde Azure-gedreven datapijplijnen en governance bij een Belgisch openbaarvervoerbedrijf. Je werkt aan moderne data-infrastructuur en self-service mogelijkheden voor business teams, met focus op Databricks Unity Catalog en Lakehouse-ontwerpen.

Je hebt minimaal 5 jaar ervaring, sterke kennis van Spark/PySpark, SQL en Python, en kunt complexe data-architectuur opleveren.