Data Engineer - GCP Data Pipelines & BigQuery

Keoni; France; Hybrid; EUR 55,000 - 85,000; Full time

Job summary

La société Kéoni Consulting recherche un Data Engineer spécialisé Google Cloud Platform (GCP) pour rejoindre l’équipe Data. Vous participerez à la conception, l’implémentation et l’industrialisation de pipelines data robustes et scalables, en collaboration avec les autres équipes Data.

Vous manipulerez BigQuery, Dataplex, Python, SQL et orchestrerez les flux via Airflow, Terraform et Terragrunt, tout en assurant la qualité et la traçabilité des données et en contribuant à la CI/CD.

Qualifications

• Au moins 3 ans d’expérience en Data Ingénieur.
• Compétences solides en structures de données et architecture.
• Expériences dans la conception et la réalisation de pipelines data.
• Expériences dans un environnement du cloud Google (GCP).
• Expériences intégrant BigQuery et Dataplex Universal Catalog.
• Expériences intégrant les langages Python et SQL.
• Expériences intégrant Spark, dbt, Terraform et Terragrunt.
• Expériences intégrant GitLab et Gitlab CI/CD.
• Méthodologies Agile : Scrum ou Kanban.
• Capacité à vulgariser et à communiquer des aspects techniques.

Responsibilities

• Concevoir, planifier et réaliser des tâches avec l’équipe.
• Construire et maintenir des pipelines data robustes et scalables.
• Accompagner l’exploitation et le requêtage des données.
• Organiser et structurer le stockage des données.
• Mettre en place des infrastructures scalables.
• Participer à la gouvernance des données et assurer qualité et fiabilité.
• Construire et maintenir les workflows CI/CD.
• Partager les bonnes pratiques avec les data ingénieurs.
• Assurer l’évolution, sécurité et stabilité des environnements.
• Participer aux instances des data ingénieurs.
• Contribuer à la mise à jour de la documentation.
• Veille technologique active dans le domaine.

Skills

Pipelines de données

Analyse de données

Communication technique

Tools

Python

SQL

Spark

dbt

BigQuery

Airflow

Terraform

Terragrunt

GitLab CI/CD

Kanban Scrum

Job description

La société Kéoni Consulting recherche un Data Engineer spécialisé Google Cloud Platform (GCP) pour rejoindre l’équipe Data. Vous participerez à la conception, l’implémentation et l’industrialisation de pipelines data robustes et scalables, en collaboration avec les autres équipes Data.

Vous manipulerez BigQuery, Dataplex, Python, SQL et orchestrerez les flux via Airflow, Terraform et Terragrunt, tout en assurant la qualité et la traçabilité des données et en contribuant à la CI/CD.