Lakehouse Data Engineer: Spark, DBT, Iceberg, AWS

Lexi / Tailornet; Paris; On-site; EUR 62,000 - 67,000; Full time

Benefits offered by this job

Carte ticket restaurant

Remboursement 50% du transport

Mutuelle et prévoyance

Environnement international

Job summary

Lexi / Tailornet recherche un Data Engineer expérimenté pour accompagner le pôle Data Services d’un grand compte du secteur des transports. Vous contribuerez à la conception, à l’industrialisation et à l’évolution des solutions data, en travaillant sur l’architecture Lakehouse et les pipelines batch et streaming.

Vous aurez en charge le développement avec Spark, DBT et Iceberg sur AWS, l’orchestration Airflow et l’Infrastructure as Code.

Qualifications

• 8 années minimum d’expérience en Data Engineering.
• Maîtrise avancée des architectures Big Data et Lakehouse.
• Expertise réelle sur Spark, DBT, Iceberg, AWS et Terraform.
• Maîtrise des services AWS (Glue, EMR, S3, ...)
• Connaissance de Trino/Starburst, Datadog.
• Forte capacité d’analyse et de compréhension des enjeux métiers.
• Rigueur, autonomie et culture de l’amélioration continue.

Responsibilities

• Concevoir, développer et optimiser des pipelines de données à grande échelle.
• Mettre en œuvre des flux batch, streaming et ingestion via API.
• Structurer les transformations selon un modèle Médaillon (Bronze / Silver / Gold).
• Développer et industrialiser les pipelines via DBT, Spark et Iceberg.
• Contribuer à l’évolution de l’architecture Lakehouse.

Job description

Lexi / Tailornet recherche un Data Engineer expérimenté pour accompagner le pôle Data Services d’un grand compte du secteur des transports. Vous contribuerez à la conception, à l’industrialisation et à l’évolution des solutions data, en travaillant sur l’architecture Lakehouse et les pipelines batch et streaming.

Vous aurez en charge le développement avec Spark, DBT et Iceberg sur AWS, l’orchestration Airflow et l’Infrastructure as Code.