Data engineer GCP

Free-Work; Champs-sur-Marne; Sur place; EUR 55 000 - 85 000; Plein temps

Résumé du poste

CAPEST-Conseils recherche un Data Engineer Cloud pour rejoindre le Pôle Data d’un acteur logistique. Vous concevez et gérez les pipelines qui alimentent les équipes BI et métiers opérationnels sur Google Cloud Platform.

Vous concevrez les flux ETL/ELT, orchestrerez Airflow, modulerez les données avec dbt et assurerez la CI/CD des pipelines. Collaboration étroite avec Power BI et les métiers pour assurer qualité et fiabilité.

Qualifications

• Concevoir et déployer des pipelines ETL/ELT sur GCP.
• Maintenir et faire vivre une data platform et les workflows.
• Assurer qualité, performance et fiabilité des données.

Responsabilités

• Concevoir les flux ETL / ELT et développer les pipelines data sur GCP
• Orchestrer les workflows sous Apache Airflow
• Transformer et modéliser les données avec dbt pour les usages BI et analytiques
• Mettre en place et maintenir la CI/CD data, versionner le code via Git
• Garantir la qualité, la performance et la fiabilité des données, superviser les pipelines et traiter les incidents
• Documenter les pipelines et collaborer avec l'Expert Power BI, le Pôle Data et les métiers

Connaissances

Conception ETL/ELT

Pipelines data

GCP

Airflow

dbt

CI/CD data

Git versioning

Collaboration BI

Outils

Google Cloud Platform (GCP)

Apache Airflow

dbt

Git

Description du poste

CAPEST-Conseils recrute pour l'un de ses clients, acteur reconnu du secteur de la logistique, un Data Engineer Cloud pour rejoindre son Pôle Data.

Le contexte

Notre client construit et industrialise sa data platform sur Google Cloud Platform. Au sein de la DSI, vous concevez et faites vivre les pipelines qui l'alimentent, au service des équipes BI et des métiers opérationnels.

Vos missions

• Concevoir les flux ETL / ELT et développer les pipelines data sur GCP
• Orchestrer les workflows sous Apache Airflow
• Transformer et modéliser les données avec dbt pour les usages BI et analytiques
• Mettre en place et maintenir la CI/CD data, versionner le code via Git
• Garantir la qualité, la performance et la fiabilité des données, superviser les pipelines et traiter les incidents
• Documenter les pipelines et collaborer avec l'Expert Power BI, le Pôle Data et les métiers