Data Engineer

OVH GmbH; Cesson-Sévigné; Sur place; EUR 45 000 - 65 000; Plein temps

Résumé du poste

Une entreprise de technologie dans le cloud recherche un(e) expert(e) en traitement de données pour rejoindre l'équipe Data Processing Engine. Le candidat idéal aura une expérience avec Apache Spark et des connaissances en Python et Golang. Vous serez responsable de la construction et de l'optimisation de solutions de données qui soutiennent la fiabilité et l'évolutivité. Un environnement dynamique et innovant vous attend.

Qualifications

• Une expérience professionnelle avec Apache Spark et l'écosystème API microservices.
• Capacité d'analyser et surveiller les indicateurs de performance.
• Appréciation de la recherche et résolution de problèmes complexes.

Responsabilités

• Concevoir et optimiser des systèmes de traitement de données distribuées.
• Construire et maintenir des connecteurs pour assurer l'intégrité des données.
• Développer et maintenir des pipelines d'automatisation CI/CD.

Connaissances

Connaissance des données distribuées

Développement Python

Développement Golang

Analyse des performances

Sensibilité aux concepts DevOps

Outils

Apache Spark

API microservices

Description du poste

Overview

Sélectionnez la fréquence (en jours) de réception d’une alerte:

1. Échange avec notre Talent Acquisition Specialist: Arthur

2. Entretien avec le Manager: Clément

3. Rencontre possible avec l'équipe ou un pair

OVHcloud valorise la diversité des personnes qu’elle embauche et accompagne. La diversité pour nous, c’est favoriser un milieu de travail où les différences individuelles sont reconnues, appréciées et respectées de façon à développer le plein potentiel et les forces de chacune et chacun. Soyez libre d’être vous-même!

La data a un impact fort dans tous les aspects de notre vie. Elle change aussi notre manière de concevoir le monde et son usage reflète le type de société dans laquelle nous voulons vivre. En tant qu’acteur majeur de la tech, nous faisons tout ce qui est en notre pouvoir depuis plus de 20 ans pour réduire notre impact environnemental grâce à l’innovation industrielle et pour garantir un cloud libre #SustainableByDesign

Découvrez nos collaboratrices et collaborateurs passionné(e)s et explorez leurs métiers chez OVHcloud!

Vous voulez contribuer à des projets uniques pour construire ensemble le cloud libre ? Allons-y! Chez OVHcloud, nous sommes animés par la même volonté, celle de construire l’avenir ensemble pour défendre la liberté d’innover. Découvrez l’acteur majeur du cloud libre et responsable.

• Vous rejoindrez l\'équipe Data Processing Engine de l\'unité Analytics.
• Notre mission est de proposer un catalogue exhaustif de connecteurs afin de collecter, transformer et raffiner les données, en proposant des outils de Data Engineering.
• Vous serez principalement responsable de la construction, de la maintenance et de l\'optimisation de solutions de données distribuées, contribuant à la fiabilité, l\'évolutivité et la sécurité de notre écosystème de plateforme de données.

Vos principales responsabilités

• Concevoir, implémenter et optimiser des systèmes de traitement de données distribuées comme Apache Spark.
• Construire et maintenir des connecteurs, en assurant l\'intégrité, la sécurité et un accès performant aux données.
• Développer, deployer et maintenir une solution robuste grâce à des pipelines d\'automatisation CI/CD, dans des langages tels que Python & Golang.
• Surveiller et améliorer les performances des systèmes de données, notamment l\'optimisation des connecteurs et la gestion des ressources.
• Garantir un niveau d\'excellence en suivant les recommandations idiomatiques et de code analysis/coverage du marché.
• Rédiger et maintenir une documentation technique complète pour soutenir le transfert de connaissances au sein de l\'équipe et se conformer aux normes de certification.

Votre futur impact

Dans 6 mois vous aurez

• Créé et optimisé un connecteur pour enrichir notre catalogue afin de répondre à de nouveau besoin clients.
• Participé au design collaboratif d\'une nouvelle solution de gestion des workflow de données ou amélioration de l\'actuelle.
• Contribué à l\'amélioration continue du système d\'observabilité du Data Processing Engine de la Data Platform.

Compétences requises :

• Vous avez une bonne connaissance des concepts de données distribuées, d\'orchestration et de Data de manière transverse.
• Vous justifiez d\'au moins une expérience professionnelle avec les technologies de Apache Spark et d\'écosystème API microservices.
• Vous êtes confirmé/e dans le développement (Python/Golang...).
• Vous êtes en capacité d\'analyser et surveiller les indicateurs de performance.
• Vous avez une appétence pour la recherche et la résolution de problèmes complexes dans de larges environnements.
• Vous êtes sensible aux concepts DevOps, d\'observabilité et de maintien en condition opérationnelles dans un environnement de production.

C\'est un +

• Vous assurez et promouvez une veille sur les technologies et la compétition.
• Vous justifiez d\'une expérience de maintien en condition opérationnel d\'un système à grande échelle.