Administrateur plateforme Big Data (Cloudera Data Platform) (IT) / Freelance

Les rôles de la DSI sur cette plateforme nommée GAIA sont multiples :

1. Développer les pipelines d’ingestion de nouvelles données
2. Industrialiser les développements (ingestions, data preps, algorithmes)
3. Assurer le bon fonctionnement technique de la plateforme
4. Assurer le support aux utilisateurs en cas d’anomalie et de questions sur l’utilisation de la plateforme

La DSI souhaite renforcer son équipe d’administrateurs BigData grâce à une prestation d’assistance.

Expertises / compétences

Compétences techniques nécessaires :

1. Linux (RedHat 8), Shell scripting
2. Security (LDAP, Kerberos, SSL, IDM)
3. Cloudera, HDFS, YARN, Hive, Oozie, Spark, Knox, Zeppelin, Nifi
4. Centreon, Ansible
5. Python et Scala sur environnement distribué
6. SQL
7. Maitrise des systèmes d'informations et logiciels (outils bureautiques courants, SharePoint, Power BI, etc.)

Soft skills :

1. Communiquer efficacement (ex : présentation des incidents en Comité de Pilotage Big Data)
2. Aimer travailler en équipe
3. Être réactif et autonome
4. Dialoguer avec aisance pour coordonner les intervenants sur des domaines techniques différents
5. Esprit de synthèse pour rédiger des documentations utilisateur facilement utilisables et en minimisant les erreurs sur le contenu

Activités

La prestation consiste à assurer l’administration des plateformes BigData ainsi que le support aux utilisateurs tant sur les anomalies que sur les demandes de support à l’utilisation de la plateforme GAIA.

En détail, l'ensemble des tâches des administrateurs sont les suivantes :

1. Configurer, surveiller et optimiser les systèmes de stockage et de traitement des données, tels que les clusters de serveurs et les bases de données distribuées (Cloudera)
2. Effectuer les tâches de MCO quotidiennes (vérification de l’état des jobs et de la plateforme)
3. Assurer la sécurité des données en mettant en place des mesures de protection, des politiques de contrôle d’accès et des stratégies de sauvegarde / récupération
4. Assurer l’ordonnancement des chaînes d’ingestion et des analytiques tournant sur les plateformes
5. Participer aux projets d’évolution des plateformes BigData
6. Gérer la performance des plateformes Big Data
7. Participer à la maintenance des environnements en appliquant des mises à jour
8. Automatiser les tâches récurrentes à l’aide de scripts pour optimiser la gestion des systèmes
9. Produire et maintenir la documentation d’exploitation de la plateforme
10. Contribuer à l’amélioration continue de l’exploitabilité et de la qualité de service de la plateforme
11. Maintenir et améliorer les KPI de suivi du fonctionnement de la plateforme

Le livrable associé est la documentation à jour des dernières modifications de paramétrage de la plateforme.

Profil candidat

Support aux utilisateurs :

1. Assurer une aide technique de niveau 1 et 2 aux utilisateurs de la plateforme (information, analyse, diagnostic et résolution)
2. Animer un suivi régulier d’avancement des demandes de support auprès des intervenants concernés

Les demandes de support sont formalisées par les utilisateurs via des tickets dans l’outil Follow Up (Redmine). Le livrable associé est la bonne mise à jour de Follow Up.

Dans son rôle de support aux utilisateurs, le prestataire produira un reporting mensuel des KPI standards attendus sur ce type d’activité : nombre de tickets non traités à une date donnée, temps moyen de traitement des tickets. Dans ce reporting, il proposera, le cas échéant, des améliorations permettant de réduire le backlog d’incidents, le nombre de tickets de support, et tout ce qui pourra améliorer le ressenti utilisateur. Le livrable associé est un reporting mensuel de l’activité de support et de traitement des incidents.

Support sur incident :

1. Caractériser les incidents
2. Identifier les causes
3. Identifier et appliquer les mesures correctives associées

Les incidents sont tracés dans l’outil Follow Up (Redmine). Le livrable associé est la bonne mise à jour de Follow Up.

Communication aux utilisateurs :

1. Préparer les communications liées aux incidents et à la disponibilité de la plateforme

Le livrable associé est le texte des communications et les mails envoyés aux utilisateurs (via l’adresse générique de l’équipe GAIA).