Data Platform Engineer senior freelance (H/F)

Warren Walter; Paris; On-site; EUR 90,000 - 130,000; Full time

Job summary

Warren Walter recherche un Senior Data Platform Engineer pour piloter la construction d’une Data Platform AWS à l’échelle européenne, avec démarrage en janvier 2027. Vous évoluerez sur un projet greenfield, avec ingestion en temps réel, stockage S3 et architecture Lakehouse.

Vous concevrez et industrialiserez les composants Data, gérerez l’infrastructure as code (CDK) et assurerez le Data Lineage, la Data Quality et le Catalogue, en collaboration avec des équipes internationales.

Qualifications

• Expérience senior dans la construction de plateformes Data sur AWS.
• Capacité à concevoir et industrialiser une plateforme Data from scratch.
• Connaissance des architectures Data Mesh et des concepts Lakehouse.

Responsibilities

• Concevoir et développer les composants de la Data Platform AWS.
• Mettre en place l’ingestion de données en temps réel avec AWS Kinesis.
• Industrialiser le stockage des données sur Amazon S3 et l’Infrastructure as Code (CDK).
• Implémenter Data Lineage et Data Catalogue, et assurer Data Quality et traçabilité.
• Participer à une architecture Médaillon et collaborer avec des équipes internationales.

Skills

AWS Kinesis ingestion

Real-time data processing

Data Lake / Lakehouse

Amazon S3 data storage

Infrastructure as Code (CDK)

Data Lineage

Data Catalogue

Data Quality

Data Mesh principles

Architectures cloud Native

Tools

AWS Kinesis

Amazon S3

AWS CDK

Amazon Athena

Spark (AWS Glue / EMR)

Job description

Dans le cadre de la création d’une Data Platform à l’échelle européenne, nous recherchons un(e) Senior Data Platform Engineer disposant d’une solide expertise des environnements Data sur AWS pour le démarrage d’une mission en Janvier 2027.

Vous interviendrez sur un projet structurant avec un objectif de construction et d’industrialisation d’une plateforme permettant de collecter, traiter, stocker et restituer des données à grande échelle, notamment en temps réel.

Vos missions

Vous rejoindrez l’équipe Data Platform et contribuerez activement à la conception et à la mise en place d’une nouvelle plateforme Data, construite entièrement from scratch.

À ce titre, vous serez notamment amené(e) à :

• Concevoir et développer les différents composants de la Data Platform AWS
• Mettre en place des mécanismes d’ingestion de données en temps réel avec AWS Kinesis
• Concevoir et industrialiser le stockage des données sur Amazon S3
• Développer et maintenir l’infrastructure as code avec AWS CDK
• Mettre en place les mécanismes permettant l’interrogation et la restitution des données avec Amazon Athena
• Participer à la définition et à l’implémentation d’une architecture Médaillon
• Contribuer à la construction d’une architecture Lakehouse évolutive et industrialisée
• Participer aux problématiques de Data Quality, de traçabilité et de fiabilité des données
• Contribuer à la mise en œuvre du Data Lineage et du Data Catalogue
• Participer à la structuration et à l’application des principes Data Mesh
• Collaborer avec les différentes équipes Data et techniques dans un contexte international

Compétences recherchées

Nous recherchons un profil Senior, autonome et expérimenté dans la construction de plateformes Data sur AWS.

Compétences clés :

• AWS Kinesis – ingestion et traitement de flux de données
• Amazon S3 – stockage et organisation des données
• AWS CDK – Infrastructure as Code
• Amazon Athena – interrogation et restitution des données
• Très bonne compréhension des architectures Data Lake / Lakehouse
• Maîtrise des principes d’architecture Médaillon
• Expérience des problématiques d’ingestion temps réel
• Bonne maîtrise des enjeux de Data Quality
• Connaissance des problématiques de Data Lineage et de Data Catalogue
• Bonne compréhension des principes et architectures Data Mesh

Un vrai plus

Une expérience de Spark dans un environnement AWS, notamment avec AWS Glue ou Amazon EMR, sera particulièrement appréciée.

Vous avez une expérience significative en tant que Data Platform Engineer, Senior Data Engineer ou Cloud Data Engineer, avec une forte expertise AWS. Une expérience dans la construction ou l’évolution majeure d’une Data Platform, idéalement dans un contexte greenfield / from scratch, sera particulièrement pertinente pour cette mission. Au-delà de votre expertise technique, vous êtes capable de prendre du recul sur les choix d’architecture, de travailler en autonomie et de collaborer avec différentes équipes dans un environnement international.