Senior Data Engineer - Lakehouse & Big Data Lead

Cherrypick; Saint-Denis; Sur place; EUR 90 000 - 120 000; Plein temps

Résumé du poste

Cherrypick recherche un ingénieur data expérimenté pour accompagner la modernisation et l'évolution de nos infrastructures de données, dans le cadre d'une architecture Lakehouse à l'échelle de l'entreprise.

Vous concevrez, développerez et industrialiserez des pipelines batch et streaming avec Spark, dbt et Iceberg, déployant sur AWS, orchestrant Airflow et gérant l'infrastructure IaC (Terraform).

Qualifications

• 8 ans minimum d'expérience en Data Engineering.
• Maîtrise avancée des architectures Big Data et Lakehouse.
• Esprit d'analyse : Forte capacité à appréhender et traduire les enjeux métiers.
• Savoir-être : Rigueur, autonomie et culture de l'amélioration continue.
• Compétences indispensables (Must-have) : dbt, Apache Iceberg, Apache Spark, Python.
• Environnement Cloud AWS : Maîtrise des services clés (AWS Glue, EMR, S3).
• Architecture & Modélisation : Médaillon Bronze/Silver/Gold, Lakehouse.
• Infrastructure & DevOps : Terraform, Docker, Kubernetes, Apache Airflow.
• Observabilité : Datadog, Moteurs de requêtes Trino/Starburst.
• RGPD et Data Quality.

Responsabilités

• Concevoir, développer et optimiser des pipelines de données à grande échelle (batch, streaming et ingestion via API).
• Structurer les transformations selon le modèle de modélisation Médaillon (Bronze / Silver / Gold).
• Industrialiser les flux via Spark, dbt et Apache Iceberg.
• Contribuer activement à la stratégie et à l'évolution de l'architecture Lakehouse.
• Déployer et maintenir les pipelines au sein d'un environnement Cloud AWS.
• Orchestrer les workflows ETL/ELT avec Apache Airflow.
• Gérer l'Infrastructure as Code (IaC) à l'aide de Terraform.
• Exécuter et gérer les traitements dans des environnements conteneurisés (Docker, Kubernetes).
• Garantir la haute disponibilité, la supervision et l'observabilité des traitements (Datadog).
• Assurer la gestion des incidents et les démarches d'amélioration continue.
• Mettre en œuvre les règles de qualité de données et rédiger la documentation technique et fonctionnelle.
• Garantir la conformité et la sécurité des flux RGPD.

Connaissances

Big Data Architecture

Data Modeling

Analytics mindset

Autonomy

Continuous improvement

Outils

dbt

Apache Iceberg

Apache Spark

Python

Airflow

Terraform

Docker

Kubernetes

Trino/Starburst

Datadog

Description du poste

Cherrypick recherche un ingénieur data expérimenté pour accompagner la modernisation et l'évolution de nos infrastructures de données, dans le cadre d'une architecture Lakehouse à l'échelle de l'entreprise.

Vous concevrez, développerez et industrialiserez des pipelines batch et streaming avec Spark, dbt et Iceberg, déployant sur AWS, orchestrant Airflow et gérant l'infrastructure IaC (Terraform).