Medior Data Engineer

SourcePower BV; Den Haag; On-site; EUR 60,000 - 90,000; Full time

Job summary

De CCMO zoekt een Medior Data Engineer die vanaf dag één bijdraagt aan het inrichten van een centraal dataplatform in Microsoft Azure. Je werkt samen met de CCMO-datateams en vertaalt databronnen naar betrouwbare datapijplijnen.

Je bouwt en onderhoudt pipelines met Python/SQL binnen Azure Fabric, Azure Databricks en andere Azure-technologieën. Ervaring met ingestie, gelaagde data-architecturen en datakwaliteit is vereist; Power BI-koppelingen komen ook aan bod.

Qualifications

• Kandidaat beschikt minimaal over HBO werk- en denkniveau.
• Minimaal 2 jaar werkervaring met data-engineering en dataplatformen.
• Beschikbaarheid van Microsoft-certificaten Fabric Data Engineer Associate en Azure Fundamentals.
• Aantoonbare ervaring met Microsoft Azure en Azure-dataplatformtechnologieën.
• Ervaring met Python, SQL en bouwen/onderhouden van datapijplijnen.
• Ervaring met API- en databased-ingestie, gelaagde data-architecturen, datakwaliteit en monitoring/foutafhandeling.

Responsibilities

• Opzetten en doorontwikkelen van het centrale dataplatform in Azure.
• Vertalen van databronnen en informatiebehoeften naar datapijplijnen en datasets.
• Bouwen en onderhouden van data pipelines voor rapportages en dashboards.
• Ontsluiten van gegevens uit databases, applicaties en REST API’s.
• Koppelen van datasets aan Power BI en andere rapportage-oplossingen.

Skills

Python

SQL

Data pipelines

API-ingestion

Data-architectures

Data quality

Monitoring en foutafhandeling

Education

HBO werk- en denkniveau

Microsoft Fabric Data Engineer Associate

Azure Fundamentals

Tools

Microsoft Fabric

Azure Databricks

Azure Synapse

Azure Data Factory

Delta Lake

Apache Airflow

Power BI

Job description

De Centrale Commissie Mensgebonden Onderzoek (CCMO) is een commissie ingesteld op basis van de Wet Medisch- wetenschappelijk Onderzoek met mensen (WMO). De CCMO valt onder het Ministerie VWS. Naast de WMO voert de CCMO de Embryowet uit.

De CCMO waarborgt de bescherming van onderzoekdeelnemers betrokken bij medisch- wetenschappelijk onderzoek, middels toetsing aan de daarvoor gestelde wettelijke bepalingen en met inachtneming van het belang van de voortgang van de medische wetenschap. De CCMO zelf beoordeelt medisch-wetenschappelijk onderzoek bijvoorbeeld op het gebied van somatische celtherapie en gentherapie. Zij fungeert ook als Bevoegde Instantie voor geneesmiddelenonderzoek, als toezichthouder van de erkende medisch-ethische toetsingscommissies (METC’s) en zij treedt op als beroepsinstantie.

De CCMO beoogt om met de inzet van een Agile DevOps team onder leiding van een eigen CCMO productowner, een senior data architect en een medior data engineer een centraal dataplatform in Microsoft Azure, gebaseerd op Databricks, Delta Lake en Power BI te realiseren. Dit platform vervangt de huidige versnipperde en grotendeels handmatige manier van rapporteren en biedt op termijn ondersteuning aan de kernprocessen Sturen & Verantwoorden, Beoordelen en Onderzoeken. Dit datateam wordt verder ondersteund door onze cloud platform en securityteams.

Opdrachtomschrijving

De CCMO is een groeiende organisatie met een ambitieus strategisch businessplan wat resulteert in een strategische IV/IT-behoefte. Medewerkers en stakeholders van de CCMO worden ondersteund bij de uitvoering van de medisch-ethische toetsing door gebruiksvriendelijke en digitaal weerbare IT-systemen en een duurzame informatievoorziening. We werken hierbij vanuit een Cloud-first en Cloud-native IT-strategie. De CCMO start met de realisatie van een centraal dataplatform in Microsoft Azure, gebaseerd op Microsoft Fabric en/of Azure Databricks, Delta Lake en Power BI. Dit platform vervangt de huidige versnipperde en grotendeels handmatige manier van rapporteren en biedt op termijn ondersteuning aan de kernprocessen Sturen & Verantwoorden, Beoordelen en Onderzoeken. Fase 1 richt zich op het inrichten van het platformfundament en het beschikbaar stellen van betrouwbare, uniforme data voor rapportages en dashboards ten behoeve van Sturen & Verantwoorden. De CCMO is op zoek naar een Medior Data Engineer om samen met het CCMO-datateam dit dataplatform in te richten, datasets te bouwen en te beheren. In deze opdracht is alle ruimte voor jou als Medior Data Engineer om vanaf de start een zichtbare bijdrage te leveren aan het opzetten van een nieuw dataplatform. Zo draag je bij aan onze belangrijke maatschappelijke missie: de bescherming van deelnemers betrokken bij medisch-wetenschappelijk onderzoek en het stimuleren van de voortgang van de medische wetenschap.

Als Medior Data Engineer draag je bij aan het opzetten en doorontwikkelen van het centrale dataplatform van de CCMO in Microsoft Azure. Je werkt in nauwe samenwerking met de Platform Owner, Data Architect en de functioneel en technisch beheerders. Je vertaalt databronnen en informatiebehoeften naar betrouwbare datapijplijnen, datasets en rapportageproducten.

Als Medior Data Engineer bouw en onderhoud je datapijplijnen waarmee gegevens uit databases, applicaties en API’s worden ontsloten, verwerkt en beschikbaar gesteld voor rapportages en dashboards. Je werkt binnen de vastgestelde platformarchitectuur en lagenstructuur. Je draagt bij aan de ontwikkeling van herbruikbare ingest- en transformatielogica met Python, SQL en waar nodig PySpark. Je werkt met moderne Azure-dataplatformtechnologieën zoals Microsoft Fabric, Azure Databricks, Azure Synapse, Azure Data Factory, Delta Lake en Apache Airflow. Van kandidaten wordt niet verwacht dat zij al specialist zijn in al deze technologieën. Wel wordt verwacht dat zij beschikken over een goede basis in Microsoft Azure en aantoonbaar in staat zijn zich nieuwe technologieën snel eigen te maken. Je draagt onder andere bij aan het ontsluiten van gegevens uit SQL-databases, applicaties en REST API’s, het bouwen en onderhouden van ingest- en transformatiepijplijnen, het aansluiten van datasets op Power BI en andere rapportageoplossingen en het veilig en beheersbaar verwerken van gegevens binnen de Azure-omgeving.

Waarom CCMO?

Bij de CCMO werk je mee aan de opbouw van een nieuw dataplatform vanaf de fundamenten. Dit biedt jou de kans om vanaf dag één een rol te spelen in de architectuur, bouw en doorontwikkeling van een modern, cloud-native dataplatform dat de organisatie helpt bij het nemen van

datagedreven beslissingen. Om succesvol te zijn in deze rol is het belangrijk dat je zelfstandig en proactief werkt, structuur aanbrengt in een omgeving die nog in opbouw is, en initiatief neemt. We waarderen een hands-onmentaliteit, sterke communicatieve vaardigheden en ervaring met het navigeren door de opbouw Van een dataplatform.

Benodigdheden voor aanbieding VWS:

• 2. Ingevuld Nederlands aanbieddocument met daarin een motivatie gericht op de aanvraag. Aanbieddocument max 1-1,5 pagina's lang zijn.
• 3. CV AVG-proof: Géén foto. Géén persoonsgegevens zoals (mail)adres, telefoonnummer, geboortedatum, nationaliteit of LinkedIn. Géén leveranciersgegevens

Kandidaat beschikt over minimaal HBO werk- en denkniveau.

Kandidaat heeft minimaal 2 jaar werkervaring met data-engineering, en/of data-analyse-engineering en/of het ontwikkelen en beheren van dataplatformen.

Kandidaat beschikt minimaal over de Microsoft certificaten Fabric Data Engineer Associate en Azure Fundamentals.

Mate waarin de kandidaat aantoonbare ervaring heeft met Microsoft Azure en verschillende Azure-dataplatformtechnologieën zoals Microsoft Fabric, Azure Databricks, Azure Synapse, Azure Data Factory, Delta Lake of Apache Airflow.

Mate waarin de kandidaat aantoonbare ervaring heeft met Python en SQL en met het bouwen, onderhoud van data pipelines

Mate waarin kandidaat aantoonbare ervaring heeft met API- en database- ingestie, gelaagde data-architecturen, datakwaliteit, monitoring en foutafhandeling

Mate waarin kandidaat beschikt over de gevraagde competenties en vaardigheden (toetsbaar in CV, motivatie en/of mogelijk gesprek).

Uurtarief: (laagste tarief / aangeboden tarief ) * maximale prijsscore.