Data Engineer - Self-Service Kafka Streaming Platform

EVERIENCE

Marcq-en-Barœul

Hybride

EUR 55 000 - 75 000

Plein temps

14 jours+

Recevez plus de réponses des employeurs

Envoyez un CV adapté au poste en quelques minutes.

Résumé du poste

HELPLINE Lille recherche son nouveau talent Data Engineer H/F, intégré au cœur des équipes Data Engineering chez notre client grand compte sur la métropole lilloise. Vous concevrez et automatiserez une plateforme de streaming Kafka utilisable en self-service par les équipes de développement.

Vous serez en charge de l’architecture Kafka, du déploiement sur Kubernetes et Docker, et vous contribuerez aux pipelines CI/CD via GitLab CI/CD avec une approche GitOps / IaC, tout en documentant les bonnes

Qualifications

Maîtrise de l’architecture Kafka et des connecteurs Source/Sink.
Expérience Kubernetes et Docker en déploiement d’architectures distribuées.
Connaissance de GitLab CI/CD et GitOps.
Connaissance des outils de monitoring Prometheus, Datadog, OpenTelemetry.

Responsabilités

Concevoir, bâtir et automatiser une plateforme de streaming de données basée sur Kafka utilisable en self-service.
Mettre en place la configuration as-code de la plateforme Kafka et de son écosystème; déployer des outils Self-Service via KRO.
Concevoir et maintenir les pipelines CI/CD sous GitLab CI/CD et appliquer GitOps / IaC.
Rédiger la documentation, guides de bonnes pratiques et procédures d’exploitation, et assurer le support quotidien.
Participer activement aux projets de Data Platform globale.