Senior Data Platform Engineer (GCP) Pipelines & Observability

Onyx-Conseil; Lille; Sur place; EUR 65 000 - 100 000; Plein temps

Résumé du poste

Onyx-Conseil recherche un Senior Data Engineer / Expert Dataplatform(GCP) pour renforcer sa Dataplatform en pleine transformation, basé à Lille. Vous participerez à la construction et à l’industrialisation des pipelines et des outils d’ingestion, en collaboration avec 4 experts GCP & BigQuery.

Le rôle vise à faciliter le travail des Data Engineers, améliorer l’expérience de développement des pipelines et assurer la fiabilité, la sécurité et les coûts.

Qualifications

• Profil senior ayant déjà participé à la construction d’une Dataplatform et capable d’accélérer l’industrialisation des pipelines et des outils d’ingestion.

Responsabilités

• Gouvernance et contrôle de la Dataplatform, accompagnant les Data Engineers dans les bonnes pratiques.
• Définir et appliquer les standards FinOps, observabilité et sécurité.
• Concevoir et industrialiser les pipelines: Cloud Run, Cloud Functions, Pub/Sub, Airflow, Vertex AI.
• Documenter et proposer de nouveaux outils; animer l’équipe Data Engineer chaque vendredi.

Connaissances

Data engineering

GCP expertise

Pipelines et flux

Industrialisation

Documentation

Animation d’équipe

Outils

GCP

BigQuery

Airflow

Dataform

Terraform

Vertex AI

Cloud Run

Cloud Functions

Pub/Sub

Description du poste

Onyx-Conseil recherche un Senior Data Engineer / Expert Dataplatform(GCP) pour renforcer sa Dataplatform en pleine transformation, basé à Lille. Vous participerez à la construction et à l’industrialisation des pipelines et des outils d’ingestion, en collaboration avec 4 experts GCP & BigQuery.

Le rôle vise à faciliter le travail des Data Engineers, améliorer l’expérience de développement des pipelines et assurer la fiabilité, la sécurité et les coûts.