Data Engineer GCP: Cloud Pipelines & Automation

France Travail; Colomiers; Sur place; EUR 38 000 - 55 000; Plein temps

Résumé du poste

Sopra Steria, au sein de notre Vertical Services Financiers, vous intervenez sur la conception, l’industrialisation et l’automatisation de chaînes de traitement de données sur Google Cloud Platform (GCP). Vous évoluez dans un cadre Cloud first, avec des problématiques d’industrialisation, de scalabilité et de qualité des données, au sein d’équipes expertes et structurées.

Le poste est en CDI et peut accueillir un profil débutant.

Qualifications

• Connaissance des pipelines de données et des environnements Big Data.
• Maîtrise des outils GCP et du développement CI/CD.
• Capacité à travailler en mode DevOps et à documenter les user stories.

Responsabilités

• Développement des pipelines de traitement de données et des scripts de déploiement.
• Rédaction/maintien de la documentation des user stories garantissant le respect de l'architecture.
• Gestion des anomalies, contribution au RUN et lien avec l'exploitation.
• Participation au delivery continu et à l'automatisation des tests.

Connaissances

CI/CD

GCP

Spark

Kafka

Scala

BigQuery

Airflow

Git

Data pipelines

Outils

GKE

HDFS

BigQuery

BigTable

Airflow

Composer

Docker

Terraform

Ansible

Jenkins/Cloud Build

Description du poste

Sopra Steria, au sein de notre Vertical Services Financiers, vous intervenez sur la conception, l’industrialisation et l’automatisation de chaînes de traitement de données sur Google Cloud Platform (GCP). Vous évoluez dans un cadre Cloud first, avec des problématiques d’industrialisation, de scalabilité et de qualité des données, au sein d’équipes expertes et structurées.

Le poste est en CDI et peut accueillir un profil débutant.