Senior AWS Data Platform Engineer - Lakehouse Lead

Warren Walter; Paris; Sur place; EUR 90 000 - 130 000; Plein temps

Avantages offerts par ce poste

Spark on AWS (Glue/EMR)

Résumé du poste

Warren Walter recherche un Senior Data Platform Engineer pour concevoir et déployer une Data Platform à l’échelle européenne sur AWS. Vous travaillerez sur l’ingestion en temps réel, le stockage et l’industrialisation des données, tout en assurant la traçabilité et la qualité des données.

Le poste implique une collaboration avec diverses équipes Data et techniques à l’international, avec une vision Greenfield et une forte autonomie dans un contexte européen.

Qualifications

• Profil Senior, autonome et expérimenté dans la construction de plateformes Data sur AWS.
• Maîtrise des flux en temps réel et ingestion via Kinesis, stockage via S3 et interroétation via Athena.
• Conception/industrialisation d’architectures Data Lake/Lakehouse et étude du Data Mesh.

Responsabilités

• Concevoir et développer les composants de la Data Platform AWS.
• Mettre en place l’ingestion temps réel avec AWS Kinesis et l’industrialisation du stockage sur S3.
• Développer et maintenir l’infrastructure as code avec AWS CDK.
• Contribuer au Data Lineage, Data Catalogue et à la qualité des données.
• Collaborer avec les équipes Data et techniques à l’échelle internationale.

Connaissances

AWS Kinesis

Amazon S3

AWS CDK

Amazon Athena

Data Lake / Lakehouse

Medaillon Architecture

Real-time Ingestion

Data Quality

Data Lineage

Data Catalogue

Data Mesh

Outils

Spark on AWS

Description du poste

Warren Walter recherche un Senior Data Platform Engineer pour concevoir et déployer une Data Platform à l’échelle européenne sur AWS. Vous travaillerez sur l’ingestion en temps réel, le stockage et l’industrialisation des données, tout en assurant la traçabilité et la qualité des données.

Le poste implique une collaboration avec diverses équipes Data et techniques à l’international, avec une vision Greenfield et une forte autonomie dans un contexte européen.