Data Engineer Python / Spark – Google Cloud Platform (IT) / Freelance

Free-Work; Paris; Sur place; EUR 70 000 - 95 000; Plein temps

Résumé du poste

Free-Work recherche un Data Engineer Python / Spark pour concevoir et développer des solutions Data sur Google Cloud Platform (GCP). Vous participerez à l’ingestion, l’agrégation et l’exposition de données issues de sources multiples afin de produire des reportings métiers dédiés au risque de crédit.

La mission se déroule dans une équipe experte et engagée, autour d’un projet à forte visibilité utilisant Data & Compute de GCP. Une expérience dans le domaine du risque de crédit est appréciée.

Qualifications

• Expertise technique indispensable en Python et Spark.
• Connaissance des services Google Cloud Platform (GCP).
• Expérience avec les pipelines data et l’ingestion multi-sources.

Responsabilités

• Concevoir et développer des solutions Data en Python / Spark.
• Intégrer des données issues de sources multiples et les exposer.
• Exploiter Data & Compute de Google Cloud Platform.
• Contribuer à l’ingestion, l’agrégation et les pipelines Data.
• Collaborer avec les équipes techniques et métiers et favoriser les pratiques DevOps.

Connaissances

Python / Spark

BigQuery

Dataproc

Cloud Composer

Cloud Functions

Cloud Run Jobs

GCS

Outils

XL Deploy (XLD)

Terraform

Jenkins

Description du poste

Contexte

Dans le cadre d’un projet stratégique autour de la gestion des risques climatiques et physiques, notre client recherche un Data Engineer Python / Spark pour contribuer à la mise en place d’une solution permettant d’ingérer, agréger et exposer des données issues de sources multiples afin de produire des reportings métier liés à la surveillance du risque de crédit.

La mission s’inscrit au sein d’une équipe experte et engagée, sur un projet à forte visibilité basé sur Google Cloud Platform (GCP).

Une expérience dans le domaine du risque de crédit est appréciée.

Missions

• Concevoir et développer des solutions Data en Python / Spark.

• Participer à l'intégration de données provenant de sources multiples.

• Exploiter les services Data & Compute de Google Cloud Platform.

• Contribuer à l'ingestion, l'agrégation et l'exposition des données.

• Participer à la mise en œuvre et à l'évolution des pipelines Data.

• Collaborer avec les équipes techniques et métier du projet.

• Contribuer aux pratiques DevOps et à l'industrialisation des solutions.

Profil recherché

Expertise technique indispensable :

• Python / Spark

• BigQuery

• Dataproc

• Cloud Composer

• Cloud Functions

• Cloud Run Jobs

• Google Cloud Storage (GCS)

DevOps

• XL Deploy (XLD)

• Terraform

• Jenkins