Data Engineer — Azure Databricks & Lakehouse Expert

4Dotnet; Randstad; Hybrid; EUR 50,000 - 73,000; Full time

Benefits offered by this job

Direct vast contract

Hybride werken

Ruimte voor certificeringen en groei

Diverse projecten in fintech, aviation

Job summary

4Dotnet zoekt een enthousiaste Data Engineer met Azure Databricks en Microsoft Fabric om organisaties te helpen data beter te benutten en waarde te halen uit analyse en besluitvorming.

Je ontwerpt en bouwt datapipelines, integreert data uit verschillende bronnen en werkt aan CI/CD voor data-platformen. Ervaring met PySpark, SQL en Python is vereist en je denkt actief mee over kwaliteitsverbeteringen.

Qualifications

• Ervaring als Data Engineer binnen het Microsoft Azure-ecosysteem.
• Kennis van Azure Databricks en Microsoft Fabric.
• Ervaring met PySpark, SQL en Python.
• Kennis van moderne data-platformen en automatisering.

Responsibilities

• Ontwerpen, bouwen en beheren van data pipelines binnen Azure Databricks.
• Ontsluiten en integreren van data uit diverse bron- en doelsystemen.
• Implementeren van ETL- en ELT-processen met PySpark, SQL en dbt.
• Werken met Delta Lake en Lakehouse-architecturen.
• Ontwikkelen van batch- en streamingoplossingen voor dataverwerking.
• Inrichten van CI/CD-processen en automatisering binnen data-platformen.
• Waarborgen van datakwaliteit, betrouwbaarheid en performance.
• Samenwerken met data-architecten, analisten en stakeholders.

Skills

Azure Databricks

Microsoft Fabric

SQL

Python

PySpark

Delta Lake

Tools

Azure Data Factory

Azure Data Lake Storage

dbt

Spark

Job description

4Dotnet zoekt een enthousiaste Data Engineer met Azure Databricks en Microsoft Fabric om organisaties te helpen data beter te benutten en waarde te halen uit analyse en besluitvorming.

Je ontwerpt en bouwt datapipelines, integreert data uit verschillende bronnen en werkt aan CI/CD voor data-platformen. Ervaring met PySpark, SQL en Python is vereist en je denkt actief mee over kwaliteitsverbeteringen.