Data Engineer GCP / DBT

Onyx-Conseil; Paris; Sur place; EUR 60 000 - 90 000; Plein temps

Résumé du poste

Onyx-Conseil recherche un Data Engineer pour concevoir, développer et maintenir des pipelines de données robustes à Paris. Vous travaillerez avec DBT, BigQuery et l’écosystème Google Cloud Platform pour importer, transformer et stocker les données critiques.

Vous garantirez qualité, fiabilité et disponibilité des données, optimiserez les requêtes SQL et participerez à l’automatisation des déploiements CI/CD / DataOps. Collaboration étroite avec Data Analysts et DevOps.

Responsabilités

• Concevoir, développer et maintenir des pipelines de données robustes et performants.
• Développer et industrialiser les transformations de données avec DBT.
• Concevoir et optimiser les modèles de données dans BigQuery.
• Intégrer différentes sources de données via Google Cloud Platform.
• Garantir la qualité, la fiabilité et la disponibilité des données.
• Optimiser les performances des traitements et des requêtes SQL.
• Mettre en place des tests et contrôles de qualité des données.
• Participer à l’automatisation des déploiements et aux pratiques CI/CD / DataOps.
• Contribuer à la documentation technique et au respect des standards Data.
• Collaborer avec les Data Analysts, Data Scientists, métiers et équipes Cloud/DevOps.
• Participer aux problématiques de gouvernance, sécurité et traçabilité des données propres au secteur bancaire.

Description du poste

• Concevoir, développer et maintenir des pipelines de données robustes et performants.

• Développer et industrialiser les transformations de données avec DBT.

• Concevoir et optimiser les modèles de données dans BigQuery.

• Intégrer différentes sources de données au sein de l’écosystème Google Cloud Platform.

• Garantir la qualité, la fiabilité et la disponibilité des données.

• Optimiser les performances des traitements et des requêtes SQL.

• Mettre en place des tests et contrôles de qualité des données.

• Participer à l’automatisation des déploiements et aux pratiques CI/CD / DataOps.

• Contribuer à la documentation technique et au respect des standards Data.

• Collaborer avec les Data Analysts, Data Scientists, équipes métiers et équipes Cloud/DevOps.

• Participer aux problématiques de gouvernance, sécurité et traçabilité des données propres au secteur bancaire.