DataOps Engineer - Automatisation & GCP Migration

Cherry-Pick; Paris; On-site; EUR 55,000 - 75,000; Full time

Job summary

Cherry-Pick recherche un référent technique opérationnel pour les environnements hors production d’une plateforme Data associée à un grand groupe d’assurance à Paris. Vous garantissez la disponibilité et la fiabilité d’une chaîne data dupliquée, en coordonnant les actions avec un chef de projet et un coordinateur.

Vous piloterez les refreshs, les installations Spark/Scala et Informatica, les scripts Oracle et Shell, et vous assurerez le suivi des batchs via Opcon.

Qualifications

• Expérience en exploitation d’environnements hors prod (DEV/CTR/PREPROD) et en gestion de batchs.
• Capacité à automatiser des processus et à assurer la cohérence entre environnements.
• Maîtrise des scripts SQL Oracle et des scripts Shell.
• Connaissance des outils d’orchestration et de monitoring (ex: Opcon; dashboards).

Responsibilities

• Exploitation des environnements hors prod, garantie de disponibilité et de fiabilité.
• Refresh des données et automatisation des transferts entre environnements.
• Installations applicatives: Spark/Scala, ETL Informatica, scripts Oracle et Shell.
• Synchronisation des versions et configurations entre environnements.
• Suivi opérationnel: exécution des jobs Spark, analyse des logs, gestion des dépendances et relances de batchs.
• Automatisation: développement d’outils pour réduire l’effort manuel et vérifier la cohérence post-installation et post-refresh.
• Monitoring et observabilité: construction d’un dashboard de suivi et alerting.
• Livraisons: participation aux pipelines GitLab et à la qualité des livrables.
• Migration GCP: contribution à la reconstruction des environnements hors prod sur Google Cloud.

Skills

Spark/Scala

Informatica ETL

Oracle SQL

Shell scripting

Opcon

Tools

Hadoop/HDFS/Hive

Spark

Kafka

MongoDB

Qlik

Google Cloud Platform

Job description

Cherry-Pick recherche un référent technique opérationnel pour les environnements hors production d’une plateforme Data associée à un grand groupe d’assurance à Paris. Vous garantissez la disponibilité et la fiabilité d’une chaîne data dupliquée, en coordonnant les actions avec un chef de projet et un coordinateur.

Vous piloterez les refreshs, les installations Spark/Scala et Informatica, les scripts Oracle et Shell, et vous assurerez le suivi des batchs via Opcon.