Expert OpenSearch / Kafka (IT) / Freelance

Onyx-Conseil; Chartres; Sur place; EUR 70 000 - 110 000; Plein temps

Résumé du poste

Onyx-Conseil recherche un expert pour accompagner la migration ELK vers OpenSearch dans une architecture multi-tier, avec adaptation Kafka et Logstash.

Vous auditez l’existant, analysez les choix techniques et proposez des axes d’amélioration, en particulier l’optimisation des flux Kafka et des pipelines Logstash.

Vous assurez l’industrialisation via Ansible/AWX, documentez les évolutions et accompagnez les équipes dans un cadre opérationnel exigeant.

Qualifications

• Expertise sur OpenSearch: architecture et performance.
• Expertise Kafka: administration et optimisation des flux.
• Maîtrise de Logstash et pipelines compatibles OpenSearch.
• Expérience de migration ELK vers OpenSearch (index, mappings, pipelines).
• Maîtrise Ansible / AWX pour automatisation et industrialisation.

Responsabilités

• Audit de l’architecture existante et analyse des choix techniques.
• Identification des axes d’amélioration et recommandations concrètes.
• Apport d’expertise sur l’optimisation de la plateforme OpenSearch et des clusters.
• Administration et optimisation des environnements Kafka.
• Contribution à la migration ELK vers OpenSearch (index, mappings, pipelines).
• Industrialisation via Ansible / AWX et documentation des évolutions.
• Accompagnement des équipes et transfert de compétences.

Connaissances

OpenSearch

Kafka

Logstash

Ansible/AWX

Migration ELK/OpenSearch

Outils

AWX

OpenSearch tooling

Kafka tooling

Description du poste

Dans le cadre d'un projet de replatforming de la stack ELK vers OpenSearch, une migration de la plateforme actuelle est en cours, incluant un passage d'une architecture single-tier vers une architecture multi-tier.

Cette évolution repose notamment sur :

• La mise en place d'une infrastructure OpenSearch, dimensionnée pour supporter la volumétrie actuelle et les besoins futurs,
• L'adaptation de la chaîne d'ingestion basée sur Kafka et Logstash,
• La migration des composants existants (index, mappings, templates et dashboards) vers OpenSearch,
• L'automatisation et l'industrialisation des déploiements via Ansible / AWX.

Dans ce contexte, un renfort expert est recherché pour accompagner la mise en œuvre, l'optimisation de cette architecture, et disposant d'un retour d'expérience concret sur ce type de transformation. Une attention particulière est attendue sur Kafka, afin d'accompagner son administration, son optimisation et ses évolutions.

Profil recherché :

• Audit de l'architecture existante.
• Analyse des choix techniques mis en œuvre et identification des axes d'amélioration.
• Apport d'expertise sur l'optimisation de la plateforme OpenSearch (performance, résilience, maintenabilité).
• Expertise sur les environnements Kafka (administration des clusters, optimisation des flux, gestion des performances et accompagnement des évolutions)
• Expertise Logstash (compatible OpenSearch) (pipelines, parsing, optimisation)
• Contribution à la migration ELK vers OpenSearch (index, mappings, pipelines).
• Industrialisation via Ansible / AWX.
• Documentation et accompagnement des équipes.

La ressource devra être immédiatement opérationnelle, autonome, et capable d'évoluer dans un environnement technique complexe.

Compétences attendues :

• Expertise confirmée sur OpenSearch (architecture, optimisation des performances, gestion de clusters).
• Expertise confirmée de Kafka :
  • Administration et exploitation de clusters,
  • Optimisation des performances et des flux,
  • Capacité à accompagner les évolutions d'architecture.
• Bonne expertise sur Logstash (compatible OpenSearch) (conception et optimisation des pipelines).
• Expérience dans des contextes de migration ELK vers OpenSearch
• Maîtrise d'Ansible / AWX.
• Capacité à formuler des recommandations claires et réalisable.
• Bon niveau de communication et capacité à accompagner des équipes techniques.