Cloud Data Engineer - Spark, Pipelines & Data Mesh

MP DATA; Boulogne-Billancourt; Sur place; EUR 60 000 - 90 000; Plein temps

Résumé du poste

MP DATA recrute un Data Engineer pour concevoir et déployer des solutions data, de la collecte au stockage et à la modélisation. Vous développerez des pipelines Spark, exploiterai des services cloud (AWS/GCP/Azure) et assurerez la qualité et la fiabilité des données au sein d’un environnement big data.

Profil ingénieur, première expérience requise et forte appétence métier; compétences Python/Java/C++, Kafka, Dagster/Airflow et DBT seront valorisées.

Qualifications

• Diplôme d'ingénieur(e) issus d'une grande école.
• Bonne compréhension des architectures data et des pipelines.
• Compétences démontrées en développement backend et cloud.

Responsabilités

• Concevoir et développer des solutions Data pour la collecte, l’organisation, le stockage et la modélisation des données.
• Développer des solutions Spark industrialisables en production.
• Déployer, exploiter et optimiser les services big data sur les clouds de nos clients.
• Assurer l’accès fiable, efficace et sécurisé aux sources de données métiers.
• Optimiser les processus ETL et la qualité des données.
• Maintenir les outils et une veille technique sur l’environnement.

Connaissances

Python

Java

C/C++

Kafka

Dagster

Airflow

Django

Flask

Data Mesh

Gouvernance des données

Formation

Diplôme d'ingénieur(e) grandes écoles

Outils

AWS

GCP

Azure

DBT

Description du poste

MP DATA recrute un Data Engineer pour concevoir et déployer des solutions data, de la collecte au stockage et à la modélisation. Vous développerez des pipelines Spark, exploiterai des services cloud (AWS/GCP/Azure) et assurerez la qualité et la fiabilité des données au sein d’un environnement big data.

Profil ingénieur, première expérience requise et forte appétence métier; compétences Python/Java/C++, Kafka, Dagster/Airflow et DBT seront valorisées.