Data engineer (VDAB)

Vlaanderen connect; Ukkel; Hybride; EUR 44 000 - 59 000; Plein temps

Avantages offerts par ce poste

Bruto salaris 3920–5300 EUR/maand

Bonussysteem

28 dagen verlof

Mobiliteitsbudget 810 EUR/maand

Maaltijdcheques

Opleidingsbudget

Flexibele werkuren

Thuiswerk mogelijk

Groepsverzekering

Hospitalisatieverzekering

Opleidingsbudget

Résumé du poste

Vlaanderen Connect zoekt in Brussel een Data Engineer die mee bouwt aan het vernieuwen van het dataplatform voor VDAB. Je werkt in een compact Agile team en configureert ELT-stromen met DBT en NIFI, ontwerpt dimensionele modellen en levert data voor dataproducten.

Je schrijft SQL-queries, test en valideert de data producten en documenteert de end-to-end oplossing. Met ervaring in CDP/Cloudera, Hadoop en data vault, ben je proactief, communicatief in het Nederlands en draag je bij aan continue

Qualifications

• Minimaal 5 jaar praktische ervaring als data engineer.
• Kennis van DBT, Nifi en Kafka vereist.
• Ervaring met data warehouse en data vault modellen.
• Kennis van Git, CI/CD en Agile/Scrum.
• Programmeertalen zoals Python; data pipelines ontwerpen.

Responsabilités

• Bouwen en onderhouden van datapipelines met DBT en NIFI.
• Uitbreiden en vernieuwen van het VDAB dataplatform.
• Schrijven van SQL-queries en unit tests voor data producten.
• Ondersteunen bij operationele processen en optimalisaties.

Connaissances

SQL queries

DBT

NIFI

Kafka

Python

Git

CI/CD

Hadoop

Vaultspeed

CDP

Data modeling

Data warehouse

Agile

Scrum

Event-driven

JavaScript

Formation

Bachelor of gelijkwaardig door ervaring

Outils

DBT

NIFI

Kafka

Git

Hadoop

Vaultspeed

Cloudera CDP

Description du poste

Functieomschrijving

VDAB zoekt een Data Engineer voor het data intelligence team. Dit team telt zo'n 40 collega’s. Zij voorzien interne en externe data gebruikers van oplossingen. Denk aan management rapportering en business analyse. Ook leveren ze input voor AI toepassingen. Je werkt bijvoorbeeld mee aan de transitie van een klassieke data toolset (data warehouse) naar een recenter platform op cloudera technologie (data lake).

Waarom zou de kandidaat voor deze functie moeten kiezen?

Je komt terecht in een uitdagende omgeving, in een team met een joviale en inclusieve cultuur waar je kan werken met moderne technologie. Bovendien bouw je mee aan een betere ondersteuning van de Vlaamse arbeidsmarkt

Wat is het doel van de functie ?

Je zal een belangrijke rol spelen in een uitgebreide portfolio aan projecten die gepland staan om het bestaande dataplatform te vernieuwen en verder uit te breiden. Je werkt in een compact agile team met een scrum aanpak. Je configureert de nodige ELT stromen in DBT en/of NIFI om data te transformeren. Je voegt data elementen toe aan de datavault met de Vaultspeed automator. Je stelt dimensionele datamodellen op om de gewenste datasets te ontwerpen. Je schrijft SQL-queries om de gewenste datasets voor dataproducten te creeëren. Je test en valideert dataproducten om de kwaliteit en integriteit te waarborgen en testbevindingen op te lossen. Je documenteert de end-2-end oplossing. Je geeft ondersteuning bij problemen, performance issues en werkt mee aan procesverbeteringen- en optimalisaties. Je verfijnt, samen met de functioneel analist, de gevraagde requirements voor een dataproduct en vertaalt deze naar een concrete oplossing. Je evalueert de technische haalbaarheid, beheersbaarheid en kostefficiëntie van een dataproduct en stelt hieromtrent verbeteringen voor.

De 3 belangrijkste verantwoordelijkheden

• Correct opbouwen van datapipelines die een oplossing biedt aan de beschreven user story
• Zorgen dat de geschreven code correct getest en gedocumenteerd is.
• Het scrum team versterken door een actief teamlid te zijn.

Wat zijn de belangrijkste taken?

• Bouwen van data pipelines in moderne ETL/ELT tools zoals DBT en NIFI
• Het onderhouden van het data platform van VDAB
• Schrijven en uitvoeren van unit tests om de gebouwde code te valideren
• Opvolgen en ondersteunen van de operationele processen in het team, inclusief oplossen van voorkomende bugs

Profiel

• Vaardigheden Bachelor of gelijkwaardig door ervaring
• Je hebt minimum 5 jaar praktische werkervaring als data engineer. Je kan bijvoorbeeld zelfstandig SQL-queries schrijven om testdata te selecteren of flows te begrijpen.
• Je kent de componenten en kritische tussenstappen in zowel data warehouse als event-gedreven datastromen. En je kan documentatie opstellen.
• Je hebt aantoonbare ervaring met het maken en ontwikkelen van data pipelines in DBT. Je hebt kennis van Nifi en Kafka.
• Je bent thuis in GIT en weet hoe je metadata kan beheren. Je hebt ervaring met Hadoop en big data.
• Bewezen kennis van CDP (Cloudera dataplatform) in een data & analytics context is een troef. Je kan die kennis staven door de nodige certificaties, relevante ervarin of een speciefiek leertraject.
• Je weet hoe datasets performant gemaakt kunnen worden. Je hebt al kennis gemaakt met data load refresh strategieën en met CI/CD.
• Je begrijpt de basisconcepten van Agile en Scrum. Aantoonbare ervaring met het ontwikkelen van applicaties of services in Python geeft jou net dat streepje voor op de anderen.
• Kennis opbouw van een DWH en datamodellering (3e NV, data vault, dimensioneel) Praktische kennis van javascript zien we als een plus Event driven architectuur - begrijpen wat dit betekent op gebied van data
• Je bent een echte teamplayer en sparring partner voor de functioneel analist en architecten, waar je sterke communicatieve vaardigheden (in het Nederlands) je helpen.
• Je bent proactief ingesteld, houdt van een pragmatische aanpak en vindt het heerlijk na te denken over de data oplossingen van morgen.

Waar ga je werken

Je werkt 2 dagen in Brussel, op wandelafstand van het station Brussel Noord. Jouw toekomstig team 40 personen, bestaande uit functioneel analisten, data engineers, front end developers en testers.

Wat zijn typische projecten van deze functie/afdeling?

Data integreren in het VDAB data platform, datasets aanbieden aan de verschillende klanten binnen en buiten VDAB.

Aanbod

• Vlaanderen connect biedt een contract van 38 uur voor onbepaalde duur en een competitief salarispakket met:
• Een aantrekkelijke bruto verloning (salaris tussen 3920 EUR en 5300 EUR, afhankelijk van ervaring, competenties en potentieel)
• Een bonussysteem op basis van vast te leggen doelstellingen
• 28 dagen verlof en extra wettelijke feestdagen (11/07, 02/11 en 15/11)
• Een mobiliteitsbudget van 810 EUR/maand
• Maaltijdcheques van 8 euro/dag (eigen bijdrage 1,09 euro/dag)
• Een forfaitaire onkostenvergoeding van 165 EUR/maand
• Een hospitalisatieverzekering (je kan gezinsleden aansluiten)
• Een groepsverzekering (4% werkgeversbijdrage en 1% werknemersbijdrage)
• Een arbeidsongevallenverzekering
• Een opleidingsbudget
• Flexibele werkuren
• Mogelijkheden tot thuiswerk
• Tegemoetkoming in de kosten van schoolvakantieopvang

Redenen om voor Vlaanderen Connect te kiezen!

Werk bij Vlaanderen Connect en maak elke dag tastbaar verschil voor 6,5 miljoen mensen, van je straat tot de toekomst van heel Vlaanderen. Duik in uitdagende projecten waar kwaliteit, resultaat en de nieuwste technologieën centraal staan. Groei tussen digitale experten, deel je talent en krijg de ruimte om je ambities waar te maken. Voel je écht gewaardeerd, voor wie je bent en wat je bijdraagt, als professional en als mens. 6 stappen naar een job bij Vlaanderen Connect