Data Engineer Senior

Groupe LR Technologies

Nantes

On-site

EUR 75,000 - 95,000

Full time

3 days ago
Be an early applicant

Get a reply from this employer

Your resume and cover letter, tailored to exactly what they’re hiring for.

Get past ATS filters

Job summary

Groupe LR Technologies recherche un Data Engineer Senior pour concevoir, industrialiser et faire évoluer des solutions Data, avec un rôle clé dans les choix d’architecture et le développement des infrastructures de traitement des données.

Vous participerez à la stratégie Lakehouse, assurerez performance, fiabilité et qualité des flux, et déployerez les pipelines sur AWS, en utilisant DBT, Spark, Iceberg et Airflow.

Qualifications

  • Au moins 8 ans d'expérience en Data Engineering.
  • Solide expertise dans les architectures Big Data et Lakehouse.
  • Maîtrise des technologies DBT, Apache Iceberg, Spark et Python.

Responsibilities

  • Concevoir, développer et optimiser des pipelines de données à grande échelle.
  • Mettre en œuvre des flux batch et streaming et ingestion via API.
  • Structurer les transformations selon le modèle Médaillon (Bronze/Silver/Gold).
  • Développer et industrialiser les pipelines avec DBT, Spark et Iceberg.
  • Participer à l’architecture Lakehouse et déployer dans AWS.
  • Orchestrer les workflows ETL/ELT avec Airflow et Terraform.
  • Exécuter et superviser les traitements dans des environnements Docker/Kubernetes.
  • Garantir la disponibilité, la supervision et l’observabilité des traitements.
  • Définir et appliquer les règles de qualité des données et la conformité RGPD.

Skills

DBT
Apache Iceberg
Python
Apache Spark
Modélisation Médaillon
Batch/Streaming
Lakehouse architecture
RGPD compliance
Data quality

Tools

AWS
Airflow
Terraform
Docker
Kubernetes
Datadog
Trino/Starburst

Job description

Dans le cadre de l’accompagnement de notre client, nous recherchons un Data Engineer Senior pour rejoindre le pôle Data Services.

Vous interviendrez sur la conception, l’industrialisation et l’évolution des solutions Data, avec un rôle clé dans les choix d’architecture et le développement des infrastructures de traitement des données.

Vous contribuerez notamment à la stratégie Lakehouse de l’entreprise, en veillant à la performance, à la fiabilité et à la qualité des flux de données.

Vos missions :
  • Concevoir, développer et optimiser des pipelines de données à grande échelle ;
  • Mettre en œuvre des flux de données batch, streaming et des mécanismes d’ingestion via API ;
  • Structurer les transformations de données selon le modèle Médaillon (Bronze / Silver / Gold) ;
  • Développer et industrialiser les pipelines avec DBT, Spark et Apache Iceberg ;
  • Participer à la conception et à l’évolution de l’architecture Lakehouse ;
  • Déployer et maintenir les pipelines dans un environnement Cloud AWS ;
  • Orchestrer les workflows ETL/ELT avec Airflow ;
  • Mettre en œuvre l’Infrastructure as Code avec Terraform ;
  • Exécuter et superviser les traitements dans des environnements conteneurisés (Docker, Kubernetes) ;
  • Garantir la disponibilité, la supervision et l’observabilité des traitements ;
  • Définir et appliquer les règles de qualité des données : tests, contrôles et validations automatisées ;
  • Participer à la gestion des incidents et à l’amélioration continue ;
  • Documenter les architectures, les pipelines et les règles métier ;
  • Veiller à la conformité des flux de données, notamment au regard du RGPD.
Votre profil

Vous justifiez d'au moins 8 ans d'expérience en Data Engineering et disposez d'une solide expertise dans les architectures Big Data et Lakehouse.

Vous maîtrisez impérativement les technologies suivantes :

  • DBT
  • Apache Iceberg
  • AWS : Glue, EMR, S3…
  • Python
  • Apache Spark
  • Modélisation Médaillon (Bronze / Silver / Gold)

Vous avez également des connaissances sur les environnements et outils suivants :

  • Terraform
  • Datadog
  • Airflow
  • Trino / Starburst
  • Docker et Kubernetes

Au-delà de vos compétences techniques, vous êtes reconnu(e) pour votre capacité d'analyse, votre autonomie et votre rigueur. Vous savez comprendre les enjeux métiers, prendre du recul sur les choix d'architecture et être force de proposition dans une démarche d'amélioration continue.

Get your free, confidential resume review.

or drag and drop your file here.

Similar jobs

Similar jobs worth comparing

Data Engineer Senior H/F
Data Engineer Senior H/F

Groupe LR Technologies • Nantes

On-site
EUR 70,000 - 110,000
Data Engineer Senior - BigData
Data Engineer Senior - BigData

VISIAN • Nantes

On-site
EUR 60,000 - 90,000
Senior Data Engineer — Cloud Data Pipelines & Analytics
Senior Data Engineer — Cloud Data Pipelines & Analytics

Gec Groupe • Île-de-France

On-site
EUR 60,000 - 80,000
Senior Data Engineer
Senior Data Engineer

Gec Groupe • France

Remote
EUR 60,000 - 80,000
Senior Data Engineer - CDI - H/F
Senior Data Engineer - CDI - H/F

Polyconseil • Paris

On-site
EUR 60,000 - 90,000
Data Engineer H/F Confirmé(e) - Lille
Data Engineer H/F Confirmé(e) - Lille

AVISIA • Lille

On-site
EUR 40,000 - 60,000
Senior Data Engineer Databricks
Senior Data Engineer Databricks

Pulsover • Rouen

On-site
EUR 45,000 - 75,000
Environnement de travail collaboratif
Opportunités de formation
Rémunération compétitive
+2
Consultant Data Engineer & Analytics Confirmé (F/H)
Consultant Data Engineer & Analytics Confirmé (F/H)

Thélio • Bordeaux

On-site
EUR 50,000 - 75,000
Lead Databricks / Data Engineer (H/F)
Lead Databricks / Data Engineer (H/F)

Alveor • Paris

On-site
EUR 70,000 - 110,000
Data Engineer Senior - PySpark
Data Engineer Senior - PySpark

VISIAN • Nantes

On-site
EUR 60,000 - 85,000