Data Engineer sr – Amsterdam / remote

Hercor; Amsterdam; Hybrid; EUR 90,000 - 130,000; Full time

Benefits offered by this job

Flexibele werktijden

Remote mogelijkheden

Job summary

Hercor zoekt een Senior Data Engineer voor Amsterdam en remote. Je ontwerpt en bouwt data pipelines in Azure Databricks en beheert datawarehouses met Synapse en Unity Catalog. Je werkt aan ingestie, transformatie en verrijking van data met Python, PySpark en SQL.

De rol vereist 5+ jaar ervaring in Azure Cloud, SQL en Python, plus certificeringen zoals DP700/DP750/AZ400 en Data Engineer bij Databricks. Werktijden zijn flexibel met 4×9 mogelijk.

Qualifications

• Minimaal 5 jaar ervaring met Data Engineering in Azure Cloud.
• 2
• Minimaal 5 jaar ervaring met Python en PySpark.
• Minimaal 5 jaar ervaring met SQL in enterprise omgeving.
• Minimaal 3 jaar ervaring met Azure Databricks notebooks, pipelines en Unity Catalog.
• Minimaal 3 jaar ervaring met IaC en Azure DevOps CI/CD.
• Minimaal 2 jaar ervaring met data lakehouses (medallion structuur).
• Aantoonbare ervaring met testen (unit en regressietesten).
• Aantoonbare ervaring met Git, code linting en code scanning.
• Aantoonbare werkervaring met dimensionele modelleren.
• Minimaal 2 jaar ervaring met Data Vault 2.0.
• Minimaal 3 jaar ervaring met data engineering/BI in financiële sector.
• 3 jaar ervaring met Azure Data Factory.
• 3 jaar ervaring met Azure Synapse Analytics.
• Minimaal HBO denk- en werkniveau.
• Goede schriftelijke en mondelinge vaardigheden in het Nederlands.
• Relevante Microsoft certificeringen (DP700/DP750/DP203/AZ400).
• Relevante Databricks certificering (Data engineer Associate of Professional).

Responsibilities

• Ontwerpen, ontwikkelen en optimaliseren van data pipelines binnen Azure Databricks.
• Realiseren van data‑ingestie‑, transformatie‑ en verrijkingsprocessen met Python, PySpark en SQL.
• Ontwikkelen en onderhouden van Databricks notebooks, workflows en Unity Catalog‑structuren.
• Inrichten en beheren van lakehouse‑architecturen volgens medallion architectuur.
• Implementeren van Infrastructure as Code (IaC) en CI/CD‑processen binnen Azure DevOps.
• Kennis van dimensioneel modelleren.
• Opzetten en uitvoeren van unit‑, integratie‑ en regressietesten.
• Toepassen van software engineering best practices, waaronder versiebeheer, code reviews, linting en security scanning.
• Samenwerken met data‑engineers, analisten en platformteam om hoogwaardige data‑oplossingen te realiseren.

Skills

Python

PySpark

SQL

Azure Databricks

Azure Data Factory

Azure Synapse

CI/CD Pipelines

IaC

Git

Data Lakehouses

Data Vault 2.0

Dimensional Modeling

Unit Testing

Regression Testing

Dutch language

Microsoft Certifications

Education

HBO denk- en werkniveau

Tools

Azure DevOps

Databricks

Unity Catalog

Azure Databricks notebooks

Azure Synapse Analytics

Job description

Pres J V Wierdsmastraat 138 | 3151 EG | Hoek van Holland

Voor een eindklant zijn wij op zoek naar een Senior Data Engineer

Project details

• Startdatum: Asap
• Einddatum: 30-7-27
• Uren per week: 32 a 36
• Locatie: Amsterdam en remote.
• Aanvraag sluit op 17-11 om 9:00 uur

De Data & Analyse teams spelen een sleutelrol om data van interne en externe bronnen te ontsluiten naar de afnemers binnen de Centrale Bank. Deze data omvatten kritische financiële informatie die beschikbaar gesteld moet worden voor de operatie en voor analyse doeleinden. De teams hebben een goedlopende agile BizDevOps werkwijze, en werken met moderne tooling in de Azure Cloud omgeving. Als senior data engineer kun jij met je kennis en ervaring een goede bijdrage leveren aan de teams. Je zal starten in het D&A ‘World of Warehousing’ team dat een nieuw analyseplatform Verder bieden wij flexibele werktijden waar 4×9 ook mogelijk is.

In dat team zijn meerdere grote en kritische cloud datawarehouses in beheer op basis van Synapse, Azure SQL Server en ADF. Het tweede D&A team (‘Lake of Legends’), waar je ook voor kan worden ingezet, heeft een nog sterkere focus op Azure Databricks.

Functieomschrijving

• Ontwerpen, ontwikkelen en optimaliseren van data pipelines binnen Azure Databricks.
• Realiseren van data‑ingestie‑, transformatie‑ en verrijkingsprocessen met Python, PySpark en SQL.
• Ontwikkelen en onderhouden van Databricks notebooks, workflows en Unity Catalog‑structuren.
• Inrichten en beheren van lakehouse‑architecturen volgens medallion architectuur.
• Implementeren van Infrastructure as Code (IaC) en CI/CD‑processen binnen Azure DevOps.
• Kennis van dimensioneel modelleren.
• Opzetten en uitvoeren van unit‑, integratie‑ en regressietesten.
• Toepassen van software engineering best practices, waaronder versiebeheer, code reviews, linting en security scanning.
• Samenwerken met data‑engineers, analisten en platformteam om hoogwaardige data‑oplossingen te realiseren.

Functie eisen

• Minimaal 5 jaar aantoonbare werkervaring met Data Engineering in de Azure Cloud omgeving.
• Minimaal 5 jaar aantoonbare werkervaring met Python en PySpark.
• Minimaal 5 jaar aantoonbare werkervaring met SQL in een enterprise omgeving.
• Minimaal 3 jaar aantoonbare werkervaring met het opzetten van en ontwikkelen in Azure Databricks notebooks, pipelines en Unity Catalog.
• Minimaal 3 jaar aantoonbare werkervaring met infra‑as code (IAC) en Azure DevOps CI/CD pipelines.
• Minimaal 2 jaar aantoonbare werkervaring met data lakehouses (bijv. medallion structuur).
• Aantoonbare werkervaring met testen (unit testen, regressietesten).
• Aantoonbare ervaring met Git, code linting en code scanning.
• Aantoonbare werkervaring met het ontwerpen en bouwen van dimensionele modellen.
• Minimaal 2 jaar werkervaring met Data Vault 2.0
• Minimaal 3 jaar werkervaring met data engineering / BI in een complexe Enterprise organisatie in de financiële sector.
• Minimaal 3 jaar werkervaring met Azure Data Factory.
• Minimaal 3 jaar werkervaring met Azure Synapse Analytics.
• Minimaal HBO denk- en werkniveau.
• Goede schriftelijke en mondelinge vaardigheden in de Nederlandse taal.
• Relevante Microsoft certificeringen (DP700/DP750/DP203/AZ400).
• Relevante Databricks certificering (Data engineer Associate of Professional).