Python / Spark Data Engineer — Pipelines & Airflow

Matawan Services; Provence-Alpes-Côte d'Azur; On-site; EUR 65,000 - 90,000; Full time

Job summary

Matawan Services, près de Nice, recherche un développeur Python / Spark pour renforcer l'équipe Data et concevoir et optimiser les pipelines.

Vous assurerez la conception, le développement et le maintien des pipelines volumineux, et prendrez en charge l'architecture On-Premise pour améliorer fiabilité et performance.

Le poste offre des projets variés et des parcours professionnels sur mesure au sein d'un groupe technologique en hyper-croissance.

Qualifications

• Minimum 5 ans d'expérience professionnelle globale en développement Python.
• Maîtrise technique de Python, Apache Spark (PySpark) et Apache Airflow.
• Première expérience sur le développement ou la gestion de pipelines de données (ETL) et architectures On-Premise.

Responsibilities

• Concevoir et maintenir les pipelines d'injection et traitement de données volumineuses.
• Prendre en charge l'architecture et l'optimisation des flux Data sur On-Premise.
• Garantir la fiabilité, la performance et l'automatisation des traitements.
• Mettre en place et orchestrer les workflows de données.
• Participer à la montée en maturité des pratiques de l'équipe (qualité du code, automation).

Skills

Python développement

Spark PySpark

Apache Spark

Apache Airflow

Data Pipelines

On-Premise architecture

Git

GitHub

Tools

Python

PySpark

Apache Spark

Apache Airflow

Data Pipelines

On-Premise

Git

GitHub

Job description

Matawan Services, près de Nice, recherche un développeur Python / Spark pour renforcer l'équipe Data et concevoir et optimiser les pipelines.

Vous assurerez la conception, le développement et le maintien des pipelines volumineux, et prendrez en charge l'architecture On-Premise pour améliorer fiabilité et performance.

Le poste offre des projets variés et des parcours professionnels sur mesure au sein d'un groupe technologique en hyper-croissance.