Data Engineer Kapitaalmarkten

Autoriteit Financiële Markten; Amsterdam; On-site; EUR 70,000 - 90,000; Full time

Benefits offered by this job

Laptop en smartphone

Opleidingsmogelijkheden

OV-reiskosten vergoed

Thuiswerkvergoeding

Sportschoolvergoeding

Fiets- en deviceregeling

Thuiswerkplek vergoeding

Job summary

AFM zoekt een Azure data-engineer (DevOps) op de afdeling Datagedreven Kapitaalmarkten (DAK). Je ontsluit, structureert en bereidt data voor toezicht op de kapitaalmarkten, werkt met Databricks, SQL en Azure Storage en draagt bij aan een modern dataplatform.

Je functioneert als data- consultant, bewaakt datakwaliteit en security, automatiseert data-operaties en levert data- informatiesproducten en dashboards aan.

Qualifications

• Opleiding: HBO/WO werk- en denkniveau met minimaal 3 jaar Azure cloud-ervaring.
• Technische vaardigheden: CI/CD (Azure DevOps), Git, Visual Studio Code, SQL, Python en PowerShell.
• Data & cloud: kennis Databricks, Azure Data Factory, T-SQL, en basis Entra ID.
• Modellering: begrip van 1/2/3NF en Inmon/Kimball.
• Werkwijze: ervaring met Scrum en DevOps-mentaliteit.

Responsibilities

• Ontwerpen en implementeren van data-integratie en -structurering in Databricks, SQL en Azure Storage.
• Ontwikkelen en beheren CI/CD-pipelines met Azure DevOps.
• Ondersteunen van adoptie van Databricks-features zoals Unity Catalog.
• Technisch advies en kwaliteitsbewaking op datakwaliteit en security.
• Samenwerken met platformteam en delen van kennis en best practices.

Skills

Azure Cloud

Databricks

SQL

Azure Data Factory

T-SQL

Python

PowerShell

CI/CD

Git

Visual Studio Code

Security

Datakwaliteit

DevOps

DataOps

MLOps

Scrum

Education

HBO/WO werk- en denkniveau

dp-300

az-400

Tools

Azure DevOps

Git

Job description

Als Azure data-engineer (DevOps engineer) bij de afdeling Datagedreven Kapitaalmarkten (DAK) ben je verantwoordelijk voor het ontsluiten, structureren en prepareren van data voor toepassing binnen het toezicht op de kapitaalmarkten. In onze Azure-cloudomgeving werk je met grote hoeveelheden (miljoenen tot miljarden records) gestructureerde en ongestructureerde data, verspreid over Databricks, SQL-databases en Azure Storage (flat files/blobs).

Je bouwt mee aan een modern dataplatform, ontwikkelt structurele informatieproducten en speelt een actieve rol in kennisdeling, innovatie en standaardisatie. Je hebt daarom affiniteit met het werk van data-analisten en begrijpt hoe datapreparatie, datamarts, analyses, risicomodellen en dashboards bijdragen aan effectief toezicht.

Je richt deze omgevingen in zodat data-analisten, toezichthouders en andere interne en externe gebruikers direct aan de slag kunnen met kwalitatief hoogwaardige data. Naast je technische rol fungeer je als consultant op het gebied van datakwaliteit en security. Aangezien de AFM ook privacygevoelige data ontvangt, houd je rekening met de security-aspecten die daarbij komen kijken. Je draagt daarnaast bij aan de optimalisatie van de data-operaties door automatisering en het toepassen van DevOps-, DataOps en MLOps.

Een greep uit je werkzaamheden:

• Data voorbereiden en structureren: Je ontwerpt en implementeert oplossingen voor het integreren en structureren van data in diverse opslagvormen, waaronder Databricks, SQL en Azure Storage.
• Automatiseren en CI/CD: Je ontwikkelt en beheert CI/CD pipelines (met Azure DevOps), zodat veranderingen op een geautomatiseerde en soepele wijze worden uitgerold.
• Innovatie: Je ondersteunt de adoptie van nieuwe Databricks-features zoals Declarative Automation Bundles, Unity Catalog en Genie.
• Technisch advies en kwaliteitsbewaking: Je fungeert als technisch consultant en draagt bij aan de verbetering van datakwaliteit en security binnen de organisatie.
• Samenwerking en kennisdeling: Je werkt nauw samen met collega’s binnen het platformteam en deelt actief je kennis en best practices over data-engineering en DevOps.

Afdeling en team

Binnen je rol werk je nauw samen met een multidisciplinair team, waaronder data engineers, data management specialisten en een integrator. Jullie collecteren, verwerken en analyseren gegevens om betrouwbare en waardevolle inzichten te verkrijgen. Daarbij speel je een sleutelrol in het ontwikkelen en onderhouden van modellen die toezichthouders helpen snel en effectief te werken.

Je maakt deel uit van de afdeling Datagedreven Kapitaalmarkten (DAK), een team van professionals die gezamenlijk werken aan het verbeteren van het toezicht op financiële markten. Binnen deze afdeling is er veel ruimte voor persoonlijke ontwikkeling, terwijl je samenwerkt met experts op het gebied van data-analyse, toezicht en financiële markten.

Dit vragen we:

• Opleiding & ervaring: HBO/WO werk- en denkniveau, minimaal 3 jaar ervaring met dataverwerking in MS Azure Cloud.
• Technische vaardigheden: Ervaring met CI/CD (Azure DevOps pipelines), Git, Visual Studio (Code), SQL-programmering, bij voorkeur ook Python en Powershell.
• Data & cloud expertise: Kennis van Databricks, Azure Data Factory en T-SQL, en basiskennis van identity en access management (Entra ID).
• Database modellering: Inzicht in modellering, normalisering (1/2/3NF) en modeleerprincipes zoals Inmon en Kimball.
• Werkwijze & mindset: Ervaring met Scrum, DevOps-mentaliteit gericht op automatisering, iteratie en eigenaarschap.
• Persoonlijke eigenschappen: Initiatiefrijk, resultaatgericht, zelfstandig werkend en een teamplayer.
• Certificeringen & ambitie: Kennis van of certificeringen zoals dp-300 en az-400 zijn een pré; ambitie om processen te verbeteren en kennis te delen.

Please note: Dutch language proficiency is required for this position. Candidates with a basic level of Dutch who are actively improving their language skills are also encouraged to apply.

Wat we bieden:

• Je start met een jaarcontract met uitzicht op een vast dienstverband
• 199,5 vakantie-uren per jaar (bovenop je standaard roostervrije dag)
• Een laptop en een smartphone
• Uitgebreide trainings- en opleidingsmogelijkheden
• Volledige vergoeding van OV-reiskosten (2e klas)
• Thuiswerkvergoeding voor thuiswerkdagen
• Bijdrage aan een sportschoolabonnement
• Aantrekkelijke secundaire arbeidsvoorwaarden zoals een fiets- en deviceregeling en vergoeding voor je thuiswerkplek