Senior Data Engineer GCP (H/F) (IT) / Freelance

Onyx-Conseil; Paris; Sur place; EUR 90 000 - 130 000; Plein temps

Résumé du poste

Onyx-Conseil recherche un Data Engineer GCP Senior pour concevoir et faire évoluer des pipelines et architectures Data sur Google Cloud Platform, avec un focus sur les use cases Commerce et Customer Data à forte valeur métier.

Le rôle implique le traitement des données online et offline, l’optimisation des coûts et la collaboration avec les équipes Data, Analytics et BI pour alimenter les dashboards et les indicateurs métier.

Qualifications

• Concevoir et déployer des pipelines Data sur GCP.
• Industrialiser des pipelines robustes et scalables.
• Optimiser les coûts et la qualité des données sur GCP.

Responsabilités

• Développer et industrialiser des pipelines de données sur GCP.
• Consolider les données issues des parcours online et offline.
• Exploiter BigQuery pour la transformation et l’analyse de volumes importants.
• Gérer le stockage de données sur Cloud Storage (organisation, lifecycle, formats).
• Développer et maintenir des infrastructures as code avec Terraform.
• Modéliser les données pour les indicateurs Commerce.
• Appliquer les bonnes pratiques de qualité des données et coût sur GCP.
• Travailler avec Dataflow et Pub/Sub dans les architectures.
• Collaborer avec les équipes Data, Analytics et BI.
• Faciliter la mise à disposition des données pour dashboards et visualisation.
• Améliorer continuellement les pipelines et les standards techniques.

Connaissances

Data quality

Coût optimisation

Collaboration transversale

Outils

BigQuery

Dataflow

Pub/Sub

Terraform

Cloud Storage

Description du poste

Dans le cadre d'un programme de transformation Data de grande ampleur, nous recherchons un Data Engineer GCP Senior pour intervenir sur des use cases Commerce et Customer Data à forte valeur métier.

L'objectif principal de la mission est de concevoir, développer et faire évoluer des pipelines et architectures Data sur Google Cloud Platform, permettant notamment de rapprocher les données issues des parcours clients online et offline. Ces socles devront alimenter différents usages analytiques, KPIs business et dispositifs de pilotage.

Le consultant interviendra en tant que Data Engineer expérimenté au sein de l'équipe technique, en lien étroit avec le Tech Lead GCP et les équipes Data, Analytics et BI.

Ses principales responsabilités seront les suivantes :

• Développer et industrialiser des pipelines de données robustes, scalables et performants sur GCP




• Consolider et valoriser les données issues des canaux online et offline




• Exploiter et optimiser BigQuery pour le stockage, la transformation et l'analyse de volumes importants de données




• Concevoir et gérer le stockage des données sur Cloud Storage (organisation, cycle de vie, formats, coûts)




• Développer et maintenir des infrastructures as code avec Terraform




• Participer à la modélisation des données nécessaires aux indicateurs et aux différents cas d'usage Commerce




• Appliquer les bonnes pratiques de qualité des données, de performance et d'optimisation des coûts GCP




• Travailler sur des architectures intégrant notamment Dataflow et Pub/Sub




• Collaborer étroitement avec les équipes Data, Analytics, BI et métiers




• Faciliter la mise à disposition des données pour les dashboards et solutions de Data Visualisation




• Participer à l'amélioration continue des pipelines, processus d'industrialisation et standards techniques