Data Engineer (H/F)

Free-Work; Marseille; Sur place; EUR 55 000 - 85 000; Plein temps

Résumé du poste

Visian Azur, filiale du Groupe Neurones, recherche un référent exploitation pour sa plateforme Big Data en production. Vous assurerez le run quotidien, capitalisant sur Hadoop, Spark et Hive, et travaillerez avec les équipes projet pour faire évoluer les outils.

Vous contribuerez à l'automatisation, au déploiement et au support des utilisateurs, avec Docker/Kubernetes et CI/CD. Le poste est basé à Marseille, dans un environnement dynamique et exigeant.

Qualifications

• Expérience avec une plateforme Big Data en production.
• Compétences en déploiement et CI/CD.
• Bonnes capacités d'analyse et de résolution d'incidents.

Responsabilités

• Maintenir la plateforme Datalake en production et run.
• Automatiser les solutions et réaliser les mises en production.
• Suivre les incidents et informer les utilisateurs.
• Collaborer avec les équipes projet et utilisateurs.

Connaissances

Big Data platforms

Spark

Hadoop

Kubernetes

Python

Unix/Linux

Outils

Docker

Jenkins

GitHub

Ansible

Description du poste

Qui sommes-nous ?

Visian Azur, filiale du Groupe Neurones, est une société de conseil spécialisée dans les projets data et applicatifs. Présents à Marseille, Aix-en-Provence, Sophia Antipolis, Montpellier, Toulouse et Lyon, nous accompagnons de grands comptes sur des projets techniquement exigeants.

Le poste

Vous rejoindrez le pôle Data de la Direction Technique d'un grand groupe français. Référent de l'exploitation de la plateforme Big Data, vous prendrez en charge son run en production et contribuerez à son évolution, au service des équipes projet et des utilisateurs.

Vos missions

• Maintenir la plateforme Datalake en conditions opérationnelles : traitement des incidents et des demandes des projets et des utilisateurs
• Participer à la mise en œuvre et à l'automatisation de nouvelles solutions
• Réaliser les mises en production
• Faire évoluer et améliorer les outils d'exploitation
• Informer et accompagner les utilisateurs de la plateforme
• Assurer le suivi de votre activité : bilan mensuel des tickets traités et point bimensuel sur l'avancement des projets

Environnement technique

• Big Data : Hadoop, Spark, Kafka, Hive, HBase
• Conteneurisation : Docker, Kubernetes
• Automatisation et CI/CD : Ansible, Jenkins, GitHub
• Langages : Scala, Python
• Système : Unix / Linux