GCP Data Engineer — Scalable Pipelines & Data Ops

Keoni; Paris; Hybrid; EUR 65,000 - 95,000; Full time

Job summary

Kéoni Consulting recherche un Data Engineer GCP pour rejoindre l’équipe Silver au cœur de la plateforme Data. Vous collaborerez avec un product owner, un data steward et d’autres data ingénieurs sur Python, Spark et SQL pour construire des pipelines robustes.

Vous participerez à l’exploitation, au requêtage et au stockage structuré des données, et vous contribuerez à l’industrialisation via Terraform/Terragrunt et l’orchestration Airflow. Une expérience GCP est attendue.

Qualifications

• Au moins 3 ans d’expérience en tant que Data Ingénieur dans un environnement data
• Compétences solides en data : structures de données, code, architecture
• Expériences dans la conception et la réalisation de pipelines data
• Expériences dans un environnement du cloud Google (GCP)
• Expériences intégrant BigQuery et Dataplex Universal Catalog
• Expériences intégrant les langages Python et SQL
• Expériences intégrant Spark
• Expériences intégrant dbt
• Expériences intégrant Terraform et Terragrunt
• Expériences intégrant Gitlab et Gitlab CI/CD
• Expériences intégrant les méthodologies Agile : Scrum ou Kanban
• Capacité à vulgariser et à communiquer sur des aspects purement techniques

Responsibilities

• Participer activement aux différentes phases de conception, de planification et de réalisation des tâches avec l’équipe
• Construire et maintenir des pipelines data robustes et scalables
• Accompagner les membres de l’équipe dans l’exploitation et le requêtage des données
• Organiser et structurer le stockage des données
• Mettre en place et maintenir des infrastructures scalables capable de répondre aux besoins et à l’accroissement rapide du volume de données
• Participer aux initiatives de gouvernance des données en assurant la qualité, la fiabilité et l’intégrité des données
• Construire et maintenir les workflows de la CI/CD
• Partager avec les autres data ingénieurs pour appliquer les bonnes pratiques en vigueur
• Assurer l’évolutivité, la sécurité, la stabilité des environnements
• Participer aux différentes instances des data ingénieurs
• Contribuer et veiller à la mise à jour de la documentation
• Faire de la veille technologique active dans le domaine

Skills

Data engineering

Pipelines

GCP

BigQuery

Dataplex

Python

SQL

Spark

dbt

Terraform

Terragrunt

GitLab CI/CD

Agile

Communication

Job description

Kéoni Consulting recherche un Data Engineer GCP pour rejoindre l’équipe Silver au cœur de la plateforme Data. Vous collaborerez avec un product owner, un data steward et d’autres data ingénieurs sur Python, Spark et SQL pour construire des pipelines robustes.

Vous participerez à l’exploitation, au requêtage et au stockage structuré des données, et vous contribuerez à l’industrialisation via Terraform/Terragrunt et l’orchestration Airflow. Une expérience GCP est attendue.