Expert Logstash / OpenSearch / ELK

Huxley; Chartres; On-site; EUR 55,000 - 75,000; Full time

Job summary

Huxley recherche un ingénieur data/ops à Chartres pour intégrer les flux d’ingestion vers OpenSearch et Dynatrace et concevoir les pipelines Logstash. Vous assurerez la maintenance des chaînes de collecte et participerez à l’optimisation de performances.

Vous travaillerez sur Kafka, Ansible/AWX et Python pour gérer les index et les données. Autonomie, transfert de connaissances et documentation technique seront attendus.

Qualifications

• Conception, évolution et optimisation de pipelines Logstash.
• Gestion des index, mappings et performances d’indexation OpenSearch.
• Connaissance des mécanismes de collecte et d’ingestion Dynatrace.
• Utilisation de Kafka pour les flux de données.
• Maîtrise d’Ansible/AWX pour l’automatisation.

Responsibilities

• Intégrer de nouvelles sources de données et mettre en œuvre les flux d’ingestion vers OpenSearch et Dynatrace.
• Accompagner les projets dans l’intégration de leurs données au sein de la plateforme.
• Concevoir, mettre en œuvre et faire évoluer les pipelines d’ingestion.
• Assurer le maintien en condition opérationnelle des chaînes de collecte et de traitement.
• Analyser et résoudre les incidents liés à l’ingestion des données.
• Optimiser les performances des flux Kafka et des pipelines Logstash.
• Accompagner les équipes sur la gestion des index et des données dans OpenSearch.
• Utiliser les outils d’automatisation existants basés sur Ansible / AWX.
• Produire la documentation technique et assurer le transfert de compétences.

Skills

Logstash

OpenSearch

Dynatrace

Kafka

Ansible/AWX

Python

Démarcher les besoins métiers

Documentation technique

Tools

OpenSearch

Kafka

Job description

Missions

• Intégrer de nouvelles sources de données et mettre en oeuvre les flux d'ingestion vers OpenSearch et Dynatrace.
• Accompagner les projets dans l'intégration de leurs données au sein de la plateforme.
• Concevoir, mettre en oeuvre et faire évoluer les pipelines d'ingestion.
• Assurer le maintien en condition opérationnelle des chaînes de collecte et de traitement.
• Analyser et résoudre les incidents liés à l'ingestion des données.
• Optimiser les performances des flux Kafka et des pipelines Logstash.
• Accompagner les équipes sur la gestion des index et des données dans OpenSearch.
• Utiliser les outils d'automatisation existants basés sur Ansible / AWX.
• Produire la documentation technique et assurer le transfert de compétences.

Compétences techniques attendues

• Logstash : conception, évolution et optimisation de pipelines.
• OpenSearch : gestion des index, mappings et performances d'indexation.
• Dynatrace : connaissance des mécanismes de collecte et d'ingestion de données.
• Kafka.
• Ansible / AWX.
• Maitrise de Python.
• Capacité à comprendre les besoins métiers et projets afin de proposer des solutions adaptées.
• Documentation technique et transfert de connaissances.

Points clés de la mission

• Forte composante expertise Logstash et OpenSearch.
• Intervention sur l'ensemble de la chaîne d'ingestion et d'indexation des données.
• Accompagnement des équipes projets.
• Sujets de performance, fiabilité et industrialisation des flux de données.
• Mission nécessitant une prise en main rapide et un haut niveau d'autonomie.

Expertise indispensable

• Logstash : conception, évolution et optimisation de pipelines.
• OpenSearch : gestion des index, mappings et performances d'indexation.
• Dynatrace : connaissance des mécanismes de collecte et d'ingestion de données.

Bonnes connaissances

• Kafka.
• Ansible / AWX.
• Maitrise de Python.

Compétences complémentaires

• Capacité à comprendre les besoins métiers et projets afin de proposer des solutions adaptées.
• Documentation technique et transfert de connaissances.