Data Platform Engineer: Real‑Time, Elasticsearch & Spark

Exsolvæ; Antwerpen; Sur place; EUR 65 000 - 90 000; Plein temps

Résumé du poste

Exsolvæ zoekt een Data Engineer voor het dataplatfrom dat de dagelijkse werking van een klant ondersteunt. Je neemt ownership over de Elasticsearch-omgeving en beheert real-time datapipelines, bewaking van data kwaliteit, latency en beschikbaarheid.

Je evolveert de datapipeline, API-connecties en streaming workloads, met Databricks, Spark en Kafka/Event Hubs. Een community-gedreven groei en learning budget staan centraal.

Qualifications

• Verantwoordelijkheid nemen voor de Elasticsearch-omgeving en real-time data pipelines.
• Beheren van data kwaliteit, latency en volledigheid in de streaming workloads.
• Ontwerpen en implementeren van betrouwbare wijzigingen met testing en rollback.

Responsabilités

• Eigenaarschap van de volledige datapipeline en Elasticsearch-omgeving.
• Beheer van real-time datapipelines en bewaking van data kwaliteit en latency.
• Proactief monitoren van het platform en onderzoeken van incidenten.
• Ontwerpen en implementeren van wijzigingen met testing en rollbackstrategieën.
• Doorontwikkeling van real-time data-architectuur en API's (Elasticsearch, Databricks, Spark).
• Bouwen en productionaliseren van workloads in Databricks en Spark, met Kafka of Event Hubs.
• Verbeteren van observability, schaalbaarheid en onderhoudbaarheid.

Connaissances

Data pipeline design

Observability

Monitoring

Testing & rollback

Performance troubleshooting

API-integratie

Outils

Elasticsearch

Databricks

Apache Spark

Kafka

Azure Event Hubs

Description du poste

Exsolvæ zoekt een Data Engineer voor het dataplatfrom dat de dagelijkse werking van een klant ondersteunt. Je neemt ownership over de Elasticsearch-omgeving en beheert real-time datapipelines, bewaking van data kwaliteit, latency en beschikbaarheid.

Je evolveert de datapipeline, API-connecties en streaming workloads, met Databricks, Spark en Kafka/Event Hubs. Een community-gedreven groei en learning budget staan centraal.