Expert OpenSearch / Kafka

Huxley; Chartres; Sur place; EUR 90 000 - 130 000; Plein temps

Résumé du poste

Huxley recherche un expert pour accompagner la replatforming de la stack ELK vers OpenSearch. Vous participerez à la migration d'une architecture single-tier vers une structure multi-tier, dimensionnant l'infrastructure OpenSearch et adaptant l'ingestion Kafka/Logstash.

Vous irez audit, analyse des choix techniques, optimiser les performances et la résilience, gérer les clusters Kafka et les pipelines Logstash, et industrialiser les déploiements via Ansible/AWX, tout en documentant et en

Qualifications

• Expertise OpenSearch: architecture, performances et gestion de clusters.
• Expertise Kafka: administration et exploitation de clusters.
• Optimisation des flux et des performances des pipelines.
• Conduite de migrations ELK vers OpenSearch (index, mappings, pipelines).
• Maîtrise d'Ansible / AWX.
• Capacité à formuler des recommandations claires et faisables.
• Bonne communication et accompagnement des équipes techniques.

Responsabilités

• Audit de l'architecture existante et analyse des choix techniques.
• Analyse des axes d'amélioration et recommandations concrètes.
• Apport d'expertise sur l'optimisation de la plateforme OpenSearch (performances, résilience).
• Expertise sur les environnements Kafka (administration des clusters, optimisation des flux).
• Expertise Logstash (pipelines compatibles OpenSearch).
• Migration ELK vers OpenSearch: index, mappings, pipelines.
• Industrialisation via Ansible / AWX et documentation.
• Accompagnement des équipes techniques et transfert de compétences.

Connaissances

OpenSearch architecture

Kafka administration

Logstash pipelines

AWX automation

Performance optimization

Migration ELK → OpenSearch

Outils

OpenSearch

Kafka

Logstash

Ansible

AWX

Description du poste

Dans le cadre d'un projet de replatforming de la stack ELK vers OpenSearch, une migration de la plateforme actuelle est en cours, incluant un passage d'une architecture single-tier vers une architecture multi-tier.

Cette évolution repose notamment sur :

• La mise en place d'une infrastructure OpenSearch, dimensionnée pour supporter la volumétrie actuelle et les besoins futurs,
• L'adaptation de la chaîne d'ingestion basée sur Kafka et Logstash,
• La migration des composants existants (index, mappings, templates et dashboards) vers OpenSearch,
• L'automatisation et l'industrialisation des déploiements via Ansible / AWX.

Dans ce contexte, un renfort expert est recherché pour accompagner la mise en œuvre, l'optimisation de cette architecture, et disposant d'un retour d'expérience concret sur ce type de transformation. Une attention particulière est attendue sur Kafka, afin d'accompagner son administration, son optimisation et ses évolutions.

• Audit de l'architecture existante.
• Analyse des choix techniques mis en œuvre et identification des axes d'amélioration.
• Apport d'expertise sur l'optimisation de la plateforme OpenSearch (performance, résilience, maintenabilité).
• Expertise sur les environnements Kafka (administration des clusters, optimisation des flux, gestion des performances et accompagnement des évolutions)
• Expertise Logstash (compatible OpenSearch) (pipelines, parsing, optimisation)
• Contribution à la migration ELK vers OpenSearch (index, mappings, pipelines).
• Industrialisation via Ansible / AWX.
• Documentation et accompagnement des équipes.

Profil recherché :

La ressource devra être immédiatement opérationnelle, autonome, et capable d'évoluer dans un environnement technique complexe.

Compétences attendues :

• Expertise confirmée sur OpenSearch (architecture, optimisation des performances, gestion de clusters).
• Expertise confirmée de Kafka :
• Administration et exploitation de clusters,
• Optimisation des performances et des flux,
• Capacité à accompagner les évolutions d'architecture.
• Bonne expertise sur Logstash (compatible OpenSearch) (conception et optimisation des pipelines).
• Expérience dans des contextes de migration ELK vers OpenSearch
• Maîtrise d'Ansible / AWX.
• Capacité à formuler des recommandations claires et réalisable.
• Bon niveau de communication et capacité à accompagner des équipes techniques.