MARGO Senior · On-site · Paris 31 de out. France Senior Data Engineer - Cloud Transfo python apache spark ml windows

korecv; Paris; Hybrid; EUR 70,000 - 110,000; Full time

Job summary

Chez MARGO, nous recrutons un Senior Data Engineer pour participer à la construction d'une plateforme Data développée from scratch, destinée à des équipes travaillant sur des problématiques de recherche et de calcul intensif.

Cette plateforme gère tout le cycle de vie des données : ingestion, traitements massifs et mise à disposition pour la recherche et la production, avec un enjeu majeur sur le calcul distribué et Spark.

Qualifications

• Maîtrise de Python et attention à la qualité du code.
• Bonne connaissance de Spark et du calcul distribué.
• Expérience sur des systèmes à forte volumétrie et contraintes de performance.
• À l'aise dans des environnements cloud modernes.

Responsibilities

• Concevoir et développer des pipelines de données massives.
• Intégrer Spark dans l'architecture et améliorer les performances.
• Optimiser la scalabilité des traitements et l'architecture Data.
• Participer à l'évolution de l'infrastructure Data et du code production.

Skills

Python

Spark

Distributed computing

Data pipelines

Cloud computing

Code quality

Tools

Spark

Job description

Chez MARGO, nos consultants travaillent sur ce qui compte vraiment : des projets complexes qui allient challenge intellectuel et impact business réel.C’est pourquoi nous accompagnons les plus grands acteurs de la finance, de l’industrie et de la tech sur leurs projets les plus stratégiques en Data Science, Machine Learning et Intelligence Artificielle.Vos missionsNous recherchons un Senior Data Engineer pour participer à la construction d’une plateforme Data développée from scratch, destinée à des équipes travaillant sur des problématiques de recherche et de calcul intensif.L’objectif de cette plateforme est de gérer l’ensemble du cycle de vie des données : ingestion, traitements distribués, backtesting à grande échelle et mise à disposition des données pour des usages de recherche et de production.L’un des enjeux techniques majeurs du projet concerne le calcul distribué et l’intégration de Spark au cœur de l’architecture de la plateforme.Dans ce contexte, vous interviendrez notamment sur :le développement des composants de calcul distribué,la conception et l’optimisation de pipelines de données à forte volumétrie,les problématiques de performance et de scalabilité liées aux traitements massifs,l’évolution de l’architecture Data,la qualité et la maintenabilité du code Python utilisé en production.Pourquoi rejoindre la practice ?Vous rejoindrez une practice en pleine construction, portée par une forte ambition technologique autour des infrastructures cloud, des plateformes data et des systèmes distribués.L’objectif n’est pas simplement d’accompagner des projets, mais de construire une communauté d’ingénieurs capables d’intervenir sur des sujets techniques exigeants : architecture cloud, calcul distribué, plateformes data, performance et scalabilité.Vous évoluerez dans un environnement où l’autonomie, la profondeur technique et la capacité à prendre des responsabilités sont valorisées dès le départ.Profil recherchéVous maîtrisez Python et accordez une attention particulière à la qualité du code et à la conception logicielleVous possédez une compréhension approfondie de Spark et des problématiques réelles de calcul distribuéVous avez déjà travaillé sur des systèmes à forte volumétrie ou à fortes contraintes de performanceVous êtes à l’aise dans des environnements cloud modernesCe que nous offronsDes missions ambitieuses et variées, toujours sélectionnées pour leur valeur ajoutée ;Un accompagnement de proximité par des experts reconnus ;Une communauté d’ingénieurs passionnés, avec workshops, conférences et échanges réguliers ;Une culture d’exigence technique, de partage des connaissances et de développement continu.La suite ?Premier entretien : Échangez avec un recruteur et un business developerEntretien Technique : Montrez vos compétences et recevez un retour d'expérienceEntretien de Motivation : Rencontrez un membre du comité de direction