Brussels Freelance Big Data Engineer — Spark & Airflow

ictjob.be; Brussel; Sur place; EUR 67 000 - 100 000; Plein temps

Résumé du poste

ictjob.be is op zoek naar een ervaren Freelance Big Data Engineer voor een langetermijnopdracht in Brussel. Je werkt in een complexe data-omgeving en vertaalt analytische vraagstukken naar schaalbare technische oplossingen, in nauwe samenwerking met data scientists.

Verantwoordelijkheden omvatten het ontwerpen van data pipelines, data cleansing en integratie, en werken met realtime architecturen en API-integraties.

Qualifications

• Ervaring in een moderne Big Data-omgeving.
• Kennis van Hadoop, Spark, Kafka, Airflow en Python.
• Ervaring met cloudomgevingen zoals AWS of Azure.
• CI/CD en API-ontwikkeling zijn pluspunten.

Responsabilités

• Ontwerpen en ontwikkelen van data pipelines.
• Uitvoeren van data cleansing, preparation & integration.
• Werken met large-scale data processing en Spark ETL.
• Data wrangling, joining en aggregatie.
• Verzorgen van component orchestration.
• Meewerken aan realtime architecturen en API-integraties.
• Samenwerken met data scientists om analytische modellen te vertalen.

Connaissances

Hadoop/Hive

Spark PySpark

Kafka Confluent

Apache Airflow

Python

Java/JavaScript

Docker Kubernetes

API development

Databases NoSQL MongoDB

Git CI/CD

Realtime architectures

Description du poste

ictjob.be is op zoek naar een ervaren Freelance Big Data Engineer voor een langetermijnopdracht in Brussel. Je werkt in een complexe data-omgeving en vertaalt analytische vraagstukken naar schaalbare technische oplossingen, in nauwe samenwerking met data scientists.

Verantwoordelijkheden omvatten het ontwerpen van data pipelines, data cleansing en integratie, en werken met realtime architecturen en API-integraties.