Senior Azure Data Engineer for CREDO Data Platform

Bright-Professionals; Rotterdam; On-site; EUR 90,000 - 120,000; Full time

Benefits offered by this job

36 uur per week

ZZP mogelijk

Thuiswerken mogelijk

Job summary

R.E.T. N.V. zoekt een Sr Data Engineer voor het Data Office-team binnen IT Services.Je ontwikkelt en beheert CREDO, het centrale data- en analyticsplatform op basis van een lakehouse-architectuur in Azure, met medallion-structuur en Delta Lake.

Je migreert CREDO naar Microsoft Fabric, bouwt schaalbare datapipelines, en levert gedocumenteerde datapipelines en PySpark-notebooks. Je werkt nauw samen met data-analisten en coaches andere data engineers.

Qualifications

• Meer dan 7 jaar ervaring als data engineer met ontwikkeling en beheer van een dataplatform in Azure.
• Ervaring met Microsoft Fabric en/of Azure Synapse Analytics is vereist.
• Kennis van datawarehousing en medallion-architectuur is een plus.
• Ervaring met het ontwikkelen van dataproducten en data-ontsluiting voor analyse is vereist.
• Ervaring met CI/CD en DevOps-werkstromen in Azure.

Responsibilities

• Ontwikkelen en uitbreiden van CREDO dataplaform met focus op performance en kostenoptimalisatie.
• Migreren van CREDO van Synapse naar Microsoft Fabric en implementeren van tussen- en doelarchitectuur.
• Bouwen en onderhouden van schaalbare datapipelines en PySpark-notebooks.
• Ontwerpen van dimensionele datamodellen en ontsluiten van gestructureerde en ongestructureerde bronnen.
• Uitvoeren van data quality checks en data cleansing processen.
• Beheren van SQL Datawarehouse gefocust op Azure SQL Database en Fabric Database.
• Samenwerken met data-analisten om requirements te vertalen naar technical specs.
• Implementeren en gebruiken van CI/CD pipelines inclusief quality en security controles.
• Analyseren en oplossen van complexe technische issues en documenteren van oplossingen.

Skills

Azure Cloud

Dataplatform ontwikkeling

SQL-programmeren

PySpark/notebooks

Azure DevOps

Git

CI/CD

Agile

Stakeholders communicatie

Education

Azure Data Engineer Associate (DP-203)

Tools

Azure Synapse Analytics

Microsoft Fabric

Azure SQL Database

Delta Lake

Job description

R.E.T. N.V. zoekt een Sr Data Engineer voor het Data Office-team binnen IT Services.Je ontwikkelt en beheert CREDO, het centrale data- en analyticsplatform op basis van een lakehouse-architectuur in Azure, met medallion-structuur en Delta Lake.

Je migreert CREDO naar Microsoft Fabric, bouwt schaalbare datapipelines, en levert gedocumenteerde datapipelines en PySpark-notebooks. Je werkt nauw samen met data-analisten en coaches andere data engineers.