Cloud Data Engineer - Paris

MP DATA; Boulogne-Billancourt; Sur place; EUR 60 000 - 90 000; Plein temps

Résumé du poste

MP DATA recrute un Data Engineer pour concevoir et déployer des solutions data, de la collecte au stockage et à la modélisation. Vous développerez des pipelines Spark, exploiterai des services cloud (AWS/GCP/Azure) et assurerez la qualité et la fiabilité des données au sein d’un environnement big data.

Profil ingénieur, première expérience requise et forte appétence métier; compétences Python/Java/C++, Kafka, Dagster/Airflow et DBT seront valorisées.

Qualifications

• Diplôme d'ingénieur(e) issus d'une grande école.
• Bonne compréhension des architectures data et des pipelines.
• Compétences démontrées en développement backend et cloud.

Responsabilités

• Concevoir et développer des solutions Data pour la collecte, l’organisation, le stockage et la modélisation des données.
• Développer des solutions Spark industrialisables en production.
• Déployer, exploiter et optimiser les services big data sur les clouds de nos clients.
• Assurer l’accès fiable, efficace et sécurisé aux sources de données métiers.
• Optimiser les processus ETL et la qualité des données.
• Maintenir les outils et une veille technique sur l’environnement.

Connaissances

Python

Java

C/C++

Kafka

Dagster

Airflow

Django

Flask

Data Mesh

Gouvernance des données

Formation

Diplôme d'ingénieur(e) grandes écoles

Outils

AWS

GCP

Azure

DBT

Description du poste

Dans le cadre de l'accélération de nos clients dans des contextes de gros volume de données à exploiter, nous recherchons un(e)Data Engineerpour rejoindre notre équipe.

Votre rôle sera notamment de :

Concevoir et développer des solutions Data pour la collecte, l’organisation, le stockage et la modélisation des données,

Développer des solutions Spark qui soit industrialisable dans un contexte de production

Déployer, exploiter et optimiser l'utilisation des services dans un contexte big data déployé sur les clouds providers de nos clients,

Assurer l’accès fiable, efficace et sécurisé aux différentes sources de données métier et processus, tout en mettant en place des outils et méthodes de contrôle et de validation de la qualité des données

Optimiser les processus de collecte, transfert et stockage des données (ETL), en assurant l’adéquation avec les contraintes techniques et opérationnelles

Maintenir les outils, technologies et processus à jour, en assurant une veille technique assidue et une supervision permanente de l’environnement

Garantir la qualité des développements

Diplômé(e) ingénieur(e) d’une grande école (Centrale, Mines, Supaero, Supelec, …), vous avez une appétence pour la résolution de problèmes métiers.

Vous êtes reconnu(e) pour votre rigueur, votre excellent relationnel et votre capacité à être force de proposition.

Vous êtes intéressé(e) par l’idée de vous dépasser en Data Engineering et vous disposez d'une première expérience réussi qui vous a permis de valider vos compétences dans la majorité des éléments suivants :

Python, C/C++ ou Java

Développement backend (Django / Flask)

Kafka ou autre outil event-driven.

la mise en place et l'exploitation de services Cloud : AWS / GCP / Azure

l'orchestration avec Dagster ou Airflow, les pipelines de CICD ou encore la transformation avec DBT

Tu connais les architectures data et les bonnes pratiques associés (Data Mesh, Gouvernance, Cloud First...)