Data Engineer, Azure Databricks & CI/CD Expert

1UPPLY; Den Haag; Hybrid; EUR 70,000 - 95,000; Full time

Job summary

Het Ministerie van Buitenlandse Zaken zoekt een 2FTE Data Engineer die verantwoordelijk is voor het ontwikkelen en beheren van datapipelines en het uitbreiden van het enterprise datawarehouse op basis van Azure Databricks. Je werkt nauw samen met data-analisten, data scientists en BI-consultants om data beschikbaar te maken voor beleid en besluitvorming.

Je focus ligt op automatisering, betrouwbaarheid en veiligheid van de data-omgeving, met aandacht voor datagovernance en compliance.

Qualifications

• Vaardigheden in data engineering en cloudgebaseerde datawarehouses.
• Ervaring met Python, SQL en ETL/ELT-pipelines.
• Kennis van CI/CD en DevOps-praktijken in cloudomgevingen.

Responsibilities

• Ontwikkelen en beheren van datapipelines en het enterprise datawarehouse op Azure Databricks.
• Ontsluiten en transformeren van gegevens uit diverse bronnen voor analyses en rapportages.
• Automatiseren van laad- en verwerkingsprocessen en deployments via Azure DevOps.
• Samenwerken met data-analisten, data scientists en BI-consultants over informatiebehoeften.
• Bewaken van data governance, beveiliging en compliance in cloudomgevingen.

Skills

Python

SQL

CI/CD

Azure Databricks

Data pipelines

Azure Cloud

Education

HBO/WO data engineering

Tools

Azure DevOps

PowerShell

Azure Data Factory

Job description

Het Ministerie van Buitenlandse Zaken zoekt een 2FTE Data Engineer die verantwoordelijk is voor het ontwikkelen en beheren van datapipelines en het uitbreiden van het enterprise datawarehouse op basis van Azure Databricks. Je werkt nauw samen met data-analisten, data scientists en BI-consultants om data beschikbaar te maken voor beleid en besluitvorming.

Je focus ligt op automatisering, betrouwbaarheid en veiligheid van de data-omgeving, met aandacht voor datagovernance en compliance.