GCP Data Engineer — Python/Spark for Risk Analytics

Visian; Paris; On-site; EUR 65,000 - 90,000; Full time

Job summary

Visian recherche un Data Engineer Python / Spark pour participer à la mise en œuvre d’une solution d’ingestion, d’agrégation et d’exposition de données multi-sources, afin de produire des reportings métier dédiés à la surveillance des risques.

Vous interviendrez sur Google Cloud Platform (GCP) et collaborerez avec des équipes techniques et métiers pour garantir qualité et fiabilité des développements, avec une forte visibilité sur des problématiques climatiques et physiques.

Qualifications

• Expérience avec Python et Spark pour le traitement de données.
• Conception et développement de solutions Data sur GCP.
• Connaissance des processus d’ingestion, d’agrégation et d’exposition des données.
• Approche DevOps et automatisation des traitements.

Responsibilities

• Participer à la conception et au développement de solutions Data.
• Développer et intégrer des traitements en Python / Spark.
• Mettre en œuvre les services Data et Compute de Google Cloud Platform.
• Participer à l’ingestion, l’agrégation et l’exposition de données.
• Contribuer à la production des données pour les reportings métiers.
• Participer aux tests, à l’intégration et à la mise en production.
• Contribuer à l’industrialisation et à l’automatisation des traitements.
• Participer aux pratiques DevOps du projet.
• Collaborer avec les équipes techniques et métiers.
• Garantir la qualité et la fiabilité des développements.

Skills

Python

Spark

Data engineering

GCP

Tools

Google Cloud Platform (GCP)

Job description

Dans le cadre d’un projet stratégique lié à la gestion et à la surveillance des risques , une grande organisation recherche un Data Engineer Python / Spark afin de participer à la mise en œuvre d’une solution permettant d’ingérer, d’agréger et d’exposer des données provenant de sources multiples.

La solution a pour objectif de produire des reportings métiers dans le cadre de la surveillance des risques, notamment sur les problématiques liées aux risques climatiques et physiques .

Au sein d’une équipe experte et engagée, vous participerez à la conception, au développement et à l’intégration de la solution sur Google Cloud Platform (GCP) .

Vos Principales Missions Seront

• Participer à la conception et au développement de solutions Data .
• Développer et intégrer des traitements en Python / Spark .
• Mettre en œuvre les services Data et Compute de Google Cloud Platform .
• Participer à l’ingestion, l’agrégation et l’exposition de données provenant de sources multiples.
• Contribuer à la production des données nécessaires aux reportings métiers .
• Participer aux phases de tests, d’intégration et de mise en production.
• Contribuer à l’industrialisation et à l’automatisation des traitements.
• Participer aux pratiques DevOps du projet.
• Collaborer avec les équipes techniques et métiers.
• Garantir la qualité et la fiabilité des développements réalisés.

Le projet étant stratégique et à forte visibilité , une expertise technique solide sur l’écosystème GCP est indispensable.