Expert Technique OpenSearch/Kafka

Onyx-Conseil; Chartres; Sur place; EUR 70 000 - 110 000; Plein temps

Résumé du poste

Onyx-Conseil recherche un expert OpenSearch/Kafka pour accompagner la migration ELK vers OpenSearch, optimiser l’architecture multi‑tier et soutenir l’administration et l’évolution de Kafka et Logstash. Vous interviendrez sur l’audit, l’analyse technique et l’industrialisation des déploiements via Ansible/AWX, avec documentation et accompagnement des équipes.

Vous avez une expérience concrète sur des migrations OpenSearch et des environnements Kafka/Logstash, et vous savez dimensionner des

Qualifications

• Audit de l’architecture existante.
• Analyse des choix techniques mis en œuvre et identification des axes d’amélioration.
• Apport d’expertise sur l’optimisation de la plateforme OpenSearch (performance, résilience, maintenabilité).
• Expertise sur les environnements Kafka (administration des clusters, optimisation des flux, gestion des performances et accompagnement des évolutions)
• Expertise Logstash (compatible OpenSearch) (pipelines, parsing, optimisation)
• Contribution à la migration ELK vers OpenSearch (index, mappings, pipelines).
• Industrialisation via Ansible / AWX.
• Documentation et accompagnement des équipes.

Responsabilités

• Audit de l’architecture existante et évaluation des risques.
• Proposition de choix techniques et axes d’amélioration.
• Optimisation de la plateforme OpenSearch et dimensionnement de l’infrastructure.
• Administration et optimisation des clusters Kafka et des flux de données.
• Conception et optimisation des pipelines Logstash pour OpenSearch.
• Contribuer à la migration ELK vers OpenSearch (index, mappings, pipelines).
• Industrialisation des déploiements avec Ansible / AWX et documentation associée.

Connaissances

OpenSearch

Kafka

Logstash

Ansible

AWX

Outils

OpenSearch

Kafka

Logstash

Ansible

AWX

Description du poste

Contexte :

Dans le cadre d’un projet de replatforming de la stack ELK vers OpenSearch, une migration de la plateforme actuelle est en cours, incluant un passage d’une architecture single-tier vers une architecture multi-tier.

Cette évolution repose notamment sur :

• La mise en place d’une infrastructure OpenSearch, dimensionnée pour supporter la volumétrie actuelle et les besoins futurs,


• L’adaptation de la chaîne d’ingestion basée sur Kafka et Logstash,


• La migration des composants existants (index, mappings, templates et dashboards) vers OpenSearch,


• L’automatisation et l’industrialisation des déploiements via Ansible / AWX.

Dans ce contexte, nous recherchons un renfort d’un expert OpenSearch/Kafka

pour accompagner la mise en œuvre, l’optimisation de cette architecture, et disposant d’un retour d’expérience concret sur ce type de transformation. Une attention particulière est attendue sur Kafka, afin d’accompagner son administration, son optimisation et ses évolutions.

Missions :

• Audit de l’architecture existante.


• Analyse des choix techniques mis en œuvre et identification des axes d’amélioration.


• Apport d’expertise sur l’optimisation de la plateforme OpenSearch (performance, résilience, maintenabilité).


• Expertise sur les environnements Kafka (administration des clusters, optimisation des flux, gestion des performances et accompagnement des évolutions)


• Expertise Logstash (compatible OpenSearch) (pipelines, parsing, optimisation)


• Contribution à la migration ELK vers OpenSearch (index, mappings, pipelines).


• Industrialisation via Ansible / AWX.


• Documentation et accompagnement des équipes.