Senior Data Engineer - Spark & Data Platform

MARGO; Paris; On-site; EUR 90,000 - 120,000; Full time

Job summary

MARGO recherche un Senior Data Engineer pour construire une plateforme Data from scratch, destinée à des équipes travaillant sur des problématiques de recherche et de calcul intensif, avec ingestion, traitements distribués et backtesting à grande échelle.

Vous interviendrez sur le développement de calcul distribué, l’optimisation de pipelines et l’évolution de l’architecture Data, tout en garantissant qualité et maintenabilité du code Python en production.

Qualifications

• Maîtrise de Python et qualité du code
• Bonne connaissance de Spark et du calcul distribué
• Expérience sur des systèmes à forte volumétrie et performance

Responsibilities

• Développer des composants de calcul distribué
• Concevoir et optimiser des pipelines de données à forte volumétrie
• Résoudre des enjeux de performance et de scalabilité
• Évolution de l’architecture Data et maintien du code Python en production

Skills

Python

Spark

Distributed computing

Cloud environments

Tools

Apache Spark

Python

Job description

MARGO recherche un Senior Data Engineer pour construire une plateforme Data from scratch, destinée à des équipes travaillant sur des problématiques de recherche et de calcul intensif, avec ingestion, traitements distribués et backtesting à grande échelle.

Vous interviendrez sur le développement de calcul distribué, l’optimisation de pipelines et l’évolution de l’architecture Data, tout en garantissant qualité et maintenabilité du code Python en production.