Data Engineer PySpark - Finance Data Factory (Paris)

Sopra Steria; Paris; Sur place; EUR 60 000 - 85 000; Plein temps

Résumé du poste

Sopra Steria cherche un Data Engineer PySpark pour rejoindre sa Data Factory en Île-de-France. Le candidat travaillera sur l’ingestion, la transformation et la mise à disposition de données dans un contexte Financier, en collaboration avec les Data Architects et les équipes métiers.

Profil: diplôme d’ingénieur ou équivalent et minimum 3 années d’expérience en projets Data (Big Data/BI). Compétences clave: Spark/PySpark, Hadoop, Kafka, RabbitMQ, SQL et Python.

Qualifications

• Minimum 3 ans d’expérience dans un projet Data (Big Data/BI).
• Diplôme d’ingénieur ou équivalent requis, formation data strongly souhaitée.
• Maîtrise des technologies Spark/PySpark et environnement cloud.

Responsabilités

• Comprendre les besoins métiers et proposer des solutions data ingénierie.
• Ingestion batch et streaming et structuration du DataLake.
• Gouvernance, sécurisation et exposition des données au métier.
• Mise en place de CI/CD et supervision des pipelines.
• Veille technologique et prototyping avec partenaires éditeurs.

Connaissances

SQL

Scala

R

Python

Java

Spark

Pyspark

Hadoop

Kafka

RabbitMQ

Formation

Diplômé(e) d'une Ecole d'ingénieur ou formation équivalente

Outils

Spark

Hadoop

Kafka

RabbitMQ

Description du poste

Sopra Steria cherche un Data Engineer PySpark pour rejoindre sa Data Factory en Île-de-France. Le candidat travaillera sur l’ingestion, la transformation et la mise à disposition de données dans un contexte Financier, en collaboration avec les Data Architects et les équipes métiers.

Profil: diplôme d’ingénieur ou équivalent et minimum 3 années d’expérience en projets Data (Big Data/BI). Compétences clave: Spark/PySpark, Hadoop, Kafka, RabbitMQ, SQL et Python.