Data Engineer – Azure Databricks & Lakehouse (Hybrid)

4Dotnet; Randstad; Hybrid; EUR 50,000 - 73,000; Full time

Benefits offered by this job

Flexibele werktijden

Kantoor/Thuis combinatie

Groei en certificeringen

Job summary

4Dotnet zoekt een data engineer met Azure Databricks en Microsoft Fabric-ervaring. Je ontwerpt en bouwt data pipelines, integreert data uit diverse systemen en implementeert ETL/ELT-processen om datagraad voor analyses te leveren.

Je werkt aan greenfield- en transformatietrajecten, waar kwaliteit en schaalbaarheid prioriteit hebben, met ruimte voor persoonlijke groei en kennisdeling binnen een team van specialisten.

Qualifications

• Je hebt ervaring als Data Engineer binnen het Microsoft Azure-ecosysteem.
• Je hebt kennis van Azure Databricks, Microsoft Fabric, Spark, Python en SQL.
• Ervaring met Azure Data Factory, Azure Data Lake Storage en moderne data-platformen is een pré.
• Je hebt oog voor kwaliteit, automatisering en onderhoudbaarheid.
• Je bent analytisch sterk en denkt graag mee over de beste oplossing.
• Je bent nieuwsgierig naar nieuwe ontwikkelingen binnen het data-domein en deelt jouw kennis graag met collega's.

Responsibilities

• Ontwerpen, bouwen en beheren van data pipelines binnen Azure Databricks.
• Ontsluiten en integreren van data uit diverse bron- en doelsystemen.
• Implementeren van ETL- en ELT-processen met PySpark, SQL en dbt.
• Werken met Delta Lake, Spark Declarative Pipelines en Lakehouse-architecturen.
• Ontwikkelen van batch- en streamingoplossingen voor dataverwerking.
• Inrichten van CI/CD-processen en automatisering binnen data-platformen.
• Waarborgen van datakwaliteit, betrouwbaarheid en performance.
• Samenwerken met data-architecten, analisten en stakeholders.

Skills

Azure Databricks

Microsoft Fabric

Spark

Python

SQL

ETL/ELT

Delta Lake

CI/CD

Data quality

Tools

Azure Data Factory

Azure Data Lake Storage

Job description

4Dotnet zoekt een data engineer met Azure Databricks en Microsoft Fabric-ervaring. Je ontwerpt en bouwt data pipelines, integreert data uit diverse systemen en implementeert ETL/ELT-processen om datagraad voor analyses te leveren.

Je werkt aan greenfield- en transformatietrajecten, waar kwaliteit en schaalbaarheid prioriteit hebben, met ruimte voor persoonlijke groei en kennisdeling binnen een team van specialisten.