Consultant Big Data F/H

OLCYA; Paris; Sur place; Confidentiel; Plein temps

Résumé du poste

Une société spécialisée dans l'hyper-automatisation recherche un expert Big Data pour rejoindre une équipe dynamique à Paris. Les responsabilités incluent l'administration des clusters Big Data et l'automatisation de l'infrastructure. Des compétences techniques en Python, Scala, ainsi que dans divers outils d'automatisation et de gestion de données sont requises. OLCYA propose un cadre de travail stimulant, des télétravail, et une excellente mutuelle.

Prestations

Forfait télétravail

Excellente mutuelle (prise en charge à 80%)

CSE

Formations au sein de l’Olcya academy

Qualifications

• Installation et configuration des composants Big Data.
• Expérience avec les outils de monitoring et d'administration des clusters.
• Configuration CI/CD souhaitée.

Responsabilités

• Administrer et monitorer les outils Big Data.
• Participer à l'automatisation de l'infrastructure Big Data.
• Assurer le maintien opérationnel et sécurisation des clusters.

Connaissances

Python

Scala

Linux

Windows

Automatisation

Outils

Cloudera Data Platform

Terraform

Ansible

Jenkins

Docker

Kafka

Ambari

Description du poste

Olcya est un cabinet de niche spécialisé dans l'Hyper automatisation, soit l'agrégation des offres suivantes : Big Data, Cloud, DevOps, IA & RPA, APM et Agilité.

lusieurs clients grands compte nous font déjà confiance (BNPP, SG, Total, Crédit Agricole).

Cela fait 7 ans que nous existons et beaucoup de nos consultants nous accompagnent depuis le début de l'aventure pour notre plus grande fierté !

Venir chez Olcya ne se fait pas par hasard car en plus d'une mission challengeante, vous y trouverez des responsabilités et la possibilité de devenir référent sur votre domaine d'intervention (sans compter les afterworks et un suivi de qualité).

Vos missions

Au sein d une équipe mature sur les sujets liés au Big Data, vous allez, avec d autres Olcyiens (Projet avec du BUILD et du RUN) :

• Administrer et monitorer les outils Big Data.
• Participer à l automatisation de l'infrastructure Bigdata (basée sur le logiciel de l éditeur Cloudera CDP 7.1) s appuyant sur TERRAFORM et ANSIBLE.
• Ajouter des extensions automatisées des clusters Bigdata [avec l ajout de nouveaux datanodes].
• Ajouter de nouvelles fonctionnalités automatisées (Hbase, Encryption).
• Assurer le maintien opérationnel du système (sécurisation des clusters, la mise en place d environnements de développement et de test, au support et à la résolution des problèmes N2 et N3).

Vos compétences

Stack technique :

Installation et configuration des différents composants : Zookeeper, HDFS, Spark, Hive, Kerberos, Sentry, Anaconda, Hue, Kafka, Pyspark, Hortonworks, Cloudera Data Platform (CDP/HDP).

Langage de programmation : Python, Scala.

Système : Linux, Windows.

Monitoring des clusters avec Ambari, Cloudera manager, MCS

Administration des clusters : droits d accès, Policy Ranger, création d environnements

Configuration et mise en place de la chaine CI/CD est un plus : Ansible, Jenkins, Docker, Terraform, Nexus

Avantages

Forfait télétravail, excellente mutuelle [prise en charge à 80% par l’employeur], CSE, formations au sein de l’Olcya academy…