Senior Data Engineer

TiTANS Consulting; Belgique; Sur place; EUR 70 000 - 100 000; Plein temps

Résumé du poste

TiTANS Consulting zoekt een Senior Data Engineer met ruime ervaring in het ontwerpen, bouwen en onderhouden van schaalbare, betrouwbare data-oplossingen in een cloud-omgeving.

Je werkt aan een dataplatfform op basis van moderne data-architecturen, met sterke focus op Microsoft Fabric, Power BI, Python en grootschalige datapijplijnen. Je vertaalt rapporterings- en databehoeften naar robuuste datamodellen en herbruikbare data-assets voor snelle, betrouwbare inzichten.

Qualifications

• Ruime ervaring in ontwerpen, bouwen en onderhouden van schaalbare datapipelines.
• Ervaring met data-architecturen, lakehouse- of warehouseconcepten en data governance.
• Kennis van SQL, Python, Spark en ETL-processen in een cloud-omgeving.
• Kennis van Microsoft Fabric, Azure en Power BI is een groot pluspunt.
• Ervaring met Kimball-methodologie en data-kwaliteit/lineage.

Responsabilités

• Ontwerpen, bouwen, optimaliseren en onderhouden van schaalbare datapipelines in een moderne cloud-omgeving.
• Implementeren van data-integraties vanuit diverse bronnen zoals relationele databases, API’s en bestanden.
• Beheren van lakehouse-/warehouse- en medaillonarchitecturen met focus op herbruikbaarheid en performance.
• Vertalen van rapporterings- en analysebehoeften naar robuuste datamodellen en datasets.
• Monitoren, documenteren en verbeteren van dataflows en dataprocessen.
• Actief afstemmen met business stakeholders en data-analisten over vereisten en oplossingen.
• Bijdragen aan standaarden, best practices en kennisdeling binnen het datateam.
• Ervaring met data governance, kwaliteit en lineage.

Connaissances

Python

SQL

Spark

Power BI

ETL

Data pipelines

Data modeling

Data governance

CI/CD

Cloud architecture

Java/Scala

Kimball modeling

Lakehouse/Warehouse

Data integration

Outils

Microsoft Fabric

Azure

CI/CD tooling

Git

Description du poste

Voor de verdere uitbouw en professionalisering van een modern cloud-gebaseerd dataplatform zoeken we een Senior Data Engineer met ruime ervaring in het ontwerpen, bouwen en onderhouden van schaalbare en betrouwbare data-oplossingen.

Binnen deze opdracht werk je mee aan een dataplatform op basis van een moderne data-architectuur, met een sterke focus op Microsoft Fabric, Power BI, Python en het realiseren van grootschalige, robuuste datapijplijnen. Je vertaalt rapporterings- en databehoeften naar robuuste datamodellen, performante pipelines en herbruikbare data-assets die eindgebruikers toelaten om sneller tot betrouwbare inzichten te komen.

We zoeken een zelfstandige professional die niet alleen technisch sterk is, maar ook actief meedenkt over architectuur, data governance, kwaliteit, onderhoudbaarheid en schaalbaarheid. Je werkt nauw samen met analisten, rapporteringsspecialisten, architecten, eindgebruikers en andere stakeholders.

Verantwoordelijkheden

• Ontwerpen, bouwen, optimaliseren en onderhouden van schaalbare datapipelines binnen een moderne cloud data-omgeving.
• Implementeren van data-integraties vanuit diverse bronnen, zoals relationele databases, API’s, bestanden, applicaties en andere databronnen.
• Uitwerken en beheren van lakehouse-, warehouse- en medaillonarchitecturen, met aandacht voor herbruikbaarheid, performantie en datakwaliteit.
• Vertalen van rapporterings- en analysebehoeften naar duidelijke datamodellen en betrouwbare datasets.
• Monitoren, documenteren en verbeteren van bestaande dataflows, pipelines en dataprocessen.
• Zelfstandig opnemen van dataprojecten, van analyse tot implementatie en oplevering.
• Afstemmen met business stakeholders, data analisten, architecten en technische teams over vereisten, oplossingen en opleveringen.
• Actief bijdragen aan standaarden, best practices en kennisdeling binnen het datateam.
• Aantoonbare ervaring met databanken.
• Aantoonbare ervaring met programmeertalen zoals Python, Java of Scala voor het ontwikkelen van datastromen en ETL-processen.
• Aantoonbare ervaring in het ontwerpen en implementeren van Extract, Transform, Load (ETL) processen.
• Aantoonbare ervaring met Microsoft Fabric, specifiek pipelines, dataflows en notebooks.
• Aantoonbare ervaring met cloud-gebaseerde data-architecturen, lakehouse- of warehouseconcepten - Azure.
• Aantoonbare ervaring met data-integratie vanuit meerdere bronsystemen.
• Aantoonbare ervaring met het ondersteunen van rapporterings- en analyticsomgevingen.
• Aantoonbare kennis van SQL en query-optimalisatie.
• Aantoonbare ervaring met CI/CD, versiebeheer en deployment van data-oplossingen.
• Aantoonbare ervaring met medaillonarchitectuur, bijvoorbeeld bronze, silver en gold lagen.
• Aantoonbare ervaring met Spark of Spark-gebaseerde verwerking.
• Aantoonbare kennis van data governance, data quality management en lineage.
• Aantoonbare kennis van datamodellering volgens de Kimball-methodologie.
• Aantoonbare kennis van lakehouse-, datamesh- of domein-georiënteerde data-architecturen.
• Aantoonbare ervaring binnen een publieke, stedelijke of complexe enterprise-omgeving.
• Aantoonbare ervaring met Python binnen data engineering context.