Senior Kafka Reliability & Performance Engineer (IT) / Freelance

Onyx-Conseil; Paris; Sur place; EUR 124 000 - 220 000; Plein temps

Résumé du poste

Onyx-Conseil recherche un expert Kafka pour diagnostiquer une plateforme Kafka en production (open-source, non-Confluent) dans un cadre hautement réglementé. Vous instrumenterez la plateforme et mènerez l'enquête technique pour concevoir des solutions pérennes.

Le mandat vise à livrer un plan de remédiation priorisé et un cadre d'observabilité complet, en utilisant des clients Python et C++ et en évitant Java/Kafka Streams sur ce projet.

Qualifications

• Expert Kafka avec expérience sur des environnements de production et diagnostic.
• Instrumentation et observabilité complètes à concevoir et mettre en œuvre.
• Maîtrise de Python et C++ dans un contexte systèmes/production.

Responsabilités

• Analyser les pertes d'événements intermittentes et les pics de latence tail-latency.
• Conduire l'enquête technique et proposer des solutions pérennes.
• Concevoir un cadre d'observabilité et un plan de remédiation priorisé.

Connaissances

Kafka

Observability

Python

C++

Production diagnostic

Description du poste

Nous recherchons un(e) expert(e) Kafka pour un mandat exclusivement centré sur le diagnostic d'une plateforme Apache Kafka en production (distribution open-source, non-Confluent) au sein d'un environnement hautement réglementé.

L'écosystème repose sur des clients Python et C++ utilisant la bibliothèque (les clients Java et Kafka Streams ne sont pas du tout utilisés sur ce projet).

Ta Mission:

La plateforme rencontre actuellement plusieurs difficultés que vous devrez analyser :

• Des pertes d'événements intermittentes.
• Des pics de latence de queue tail-latency inexpliqués.
• De fortes faiblesses dans la détection des incidents.

Votre rôle consistera à instrumenter la plateforme, mener l'enquête technique et concevoir des solutions pérennes.

Livrables attendus:

• Un plan de remédiation priorisé.
• Un cadre d'observabilité complet.