DataLake Dev/Data Engineer – GTLake (Spark/PySpark)

NEXTON; Paris; Sur place; EUR 60 000 - 90 000; Plein temps

Résumé du poste

NEXTON recrute un Dev/Data engineer GTLake H/F, en CDI, à Paris. Vous intègrerez l’équipe pour concevoir et industrialiser des pipelines DataLake sous Spark/PySpark, gérer la migration vers une architecture moderne en Python/PySpark et assurer la production et le suivi des workloads, tout en améliorant la plateforme GTLake.

Vous collaborerez avec les Product Owners et les équipes SI, participerez aux déploiements CI/CD et contribuerez à l’évolution structurante de la plateforme, en veillant à la

Qualifications

• Concevoir et développer des pipelines DataLake sous Spark/PySpark.
• Migrer des workflows Informatica DEI vers une architecture Python/PySpark.
• Gérer la production et suivre les batchs (Control-M) au quotidien.

Responsabilités

• Concevoir, développer et industrialiser les pipelines DataLake sous Spark/PySpark.
• Piloter la migration des workflows vers une architecture moderne en PySpark.
• Assurer la production et le suivi des batchs et de la dette technique.
• Évaluer et proposer des évolutions d'architecture GTLake pour gains de robustesse.

Connaissances

Spark

PySpark

Python

Data Lake

ETL

CI/CD

Outils

Spark

PySpark

Python

HDFS

Parquet

Iceberg

Hive/HQL

Starburst

Control-M

Jenkins

Bitbucket

XLDeploy/XLRelease

Description du poste

NEXTON recrute un Dev/Data engineer GTLake H/F, en CDI, à Paris. Vous intègrerez l’équipe pour concevoir et industrialiser des pipelines DataLake sous Spark/PySpark, gérer la migration vers une architecture moderne en Python/PySpark et assurer la production et le suivi des workloads, tout en améliorant la plateforme GTLake.

Vous collaborerez avec les Product Owners et les équipes SI, participerez aux déploiements CI/CD et contribuerez à l’évolution structurante de la plateforme, en veillant à la