Data Engineer senior (+7 ans)

iPepper

Paris

On-site

EUR 55,000 - 85,000

Full time

11 days ago

A complete application in a minute

Tailored resume and cover letter, ready to send.

Get past ATS filters

Job summary

iPepper, société de conseil et de solutions logicielles, recherche un profil Data Engineer pour participer à la modernisation des plateformes Data d'une grande banque. Vous travaillerez sur Spark, SQL, Parquet et Iceberg, avec des workloads batch et des déploiements Kubernetes.

Vous interviendrez sur les migrations CDP/Cloudera, les tests et la validation, et contribuerez à la mise en place du Data Hub intégré.

Qualifications

  • Expérience sur Spark et SQL dans des environnements Big Data.
  • Connaissance des structures Parquet et Iceberg.
  • Maîtrise des jobs Spark sur Kubernetes.
  • Connaissance Teradata SQL Assistant ou Teradata Studio; DataStage; Mega.

Responsibilities

  • Participer aux chantiers de modernisation des plateformes Data.
  • Réaliser des migrations CDP/Hors Prod lorsque nécessaire.
  • Tests unitaires et d’intégration, validations métiers.
  • Assurer la bascule et le maintien en production des nouveautés.

Skills

Spark
SQL
batch processing
Parquet
Iceberg
Kubernetes

Tools

Jira
Confluence
Teradata Studio
DataStage
Teradata SQL Assistant
Mega

Job description

iPepper, c'est à la fois une société de conseil et de solutions logicielles. Nous sommes une communauté experte et humaniste qui accompagne les meilleurs Talents de la Data Tech dans leurs missions auprès de clients impactants. Nous croyons que c'est en créant une communauté soudée, épanouie et en perpétuelle évolution que nous répondrons au mieux aux futurs grands enjeux de la DataTech.

Le poste :

La Tribu DATA construit et développe des applications sur la base de puissantes plates-formes DATA à des fins d'usages variés servant toutes les directions métier de la banque.

Pour répondre à ces usages, la tribu est au cœur de la stratégie data, et intervient aussi bien au niveau de l'architecture Data, sur les dernières technologies data, Big data (Cloudera CDP), IA (Dataiku), Teradata, SAS, ainsi que sur les solutions analytiques et de datavisualisation.

La mission consistera à participer aux chantiers de modernisation technologique de la plate-formes Data. Les principales activités seront :

  • La montée en compétences sur l'éco-système Cloudera (CDP) avec la compréhension technique de l'ensemble des uses cases du patrimoine.
  • La réalisation, avec le support de l'architecte technique et des TechLead Big Data, des travaux de montée de version CDP et de migrations applicatives quand c'est nécessaire :
    • Participer au cadrage et à la préparation des environnements cibles.
    • Réalisation de la migration des applications en environnements Hors Prod.
    • Test et validations : tests unitaires, testes d'intégration, tests de performances. Accompagnement de la validation métiers.
    • Bascule et MEP : plan de bascule, synchronisation, MES, monitoring cible.
    • Assurer la période de garantie post migration.
  • La participation à la mise en place du nouveau Data Hub LCL qui sera sur une solution intégrée à Cloudera.

Spark, SQL, traitements batch distribués, notions Parquet / Iceberg

Compréhension des jobs Spark sur Kubernetes

Profil recherché :

Spark, SQL, traitements batch distribués, notions Parquet / Iceberg

Compréhension des jobs Spark sur Kubernetes

Teradata sql assistant ou Teradata Studio ; datastage ; Mega

Jir@; Confluence

Get your free, confidential resume review.

or drag and drop your file here.

Similar jobs

Similar jobs worth comparing

Data engineer
Data engineer

Ipepper • Paris

On-site
EUR 60,000 - 90,000
Senior Data Engineer – CDP, Spark & Kubernetes
Senior Data Engineer – CDP, Spark & Kubernetes

Ipepper • Paris

On-site
EUR 55,000 - 85,000
Data Engineer Senior - PySpark
Data Engineer Senior - PySpark

VISIAN • Nantes

On-site
EUR 60,000 - 85,000
Développeur Big Data - + 3 ans
Développeur Big Data - + 3 ans

gamme solutions • Lyon

On-site
EUR 55,000 - 75,000
Data Engineer Senior - BigData
Data Engineer Senior - BigData

VISIAN • Nantes

On-site
EUR 60,000 - 90,000
Senior Data Engineer Databricks
Senior Data Engineer Databricks

Pulsover • Rouen

On-site
EUR 45,000 - 75,000
Environnement de travail collaboratif
Opportunités de formation
Rémunération compétitive
+2
Data Engineer H/F
Data Engineer H/F

Act Digital France • Vélizy-Villacoublay

On-site
EUR 50,000 - 80,000
Data Engineer
Data Engineer

Clay Group • France

Hybrid
EUR 50,000 - 70,000
Data Engineer
Data Engineer

Act Digital France • Vélizy-Villacoublay

On-site
EUR 40,000 - 60,000
Data Engineer H/F - Spark, DBT, python, Iceberg, AWS et Terraform.
Data Engineer H/F - Spark, DBT, python, Iceberg, AWS et Terraform.

Lexi / Tailornet • Paris

On-site
EUR 62,000 - 67,000
Ticket restaurant
Transport 50% remboursé
Mutuelle et prévoyance santé
+1