Data Engineer GCP

Data Conseil; Paris; On-site; EUR 55,000 - 75,000; Full time

Job summary

Data Conseil recherche pour son client un Data Engineer GCP chargé de piloter le développement et la fiabilisation des traitements de données, autour de GCP, Microsoft Fabric et Power BI.

Vous concevrez et maintiendrez des pipelines, participerez à la migration et optimiserez les coûts d’exécution, avec autonomie et collaboration multi-sites.

Qualifications

• Expérience confirmée en Data Engineering, avec des réalisations concrètes sur GCP.
• Solides compétences en développement de traitements de données et en SQL.
• Capacité à prendre en charge un développement, de la conception à la mise en production et à sa maintenance.
• Expérience dans l’optimisation, la migration ou la refonte de pipelines de données.
• Sensibilité aux enjeux de qualité, de maintenabilité et de maîtrise des coûts.
• Autonomie, rigueur et capacité à travailler avec des équipes réparties sur plusieurs sites.
• Une connaissance de Microsoft Fabric, Power BI ou Looker serait appréciée.

Responsibilities

• Analyser les besoins métier et les traduire en spécifications techniques.
• Concevoir et développer des pipelines d’ingestion, de transformation et de mise à disposition des données.
• Faire évoluer les traitements existants et optimiser leurs performances, leur fiabilité et leurs coûts d’exécution.
• Participer à la migration ou à la réécriture de traitements selon la trajectoire technique retenue.
• Mettre en place des tests, des contrôles de qualité et des mécanismes de suivi des traitements et de gestion des erreurs.
• Collaborer avec les équipes BI pour préparer les données nécessaires aux modèles sémantiques et aux restitutions.
• Contribuer à la traçabilité des données et aux bonnes pratiques de gouvernance.
• Documenter les développements et assurer le transfert de connaissances auprès des équipes internes.

Skills

GCP

SQL

Data pipelines

Data engineering

Tools

Looker

Power BI

Microsoft Fabric

Job description

Contexte

Je recherche pour un de mes clients un Data Engineer GCP

Vous évoluerez dans un environnement associant GCP, Microsoft Fabric et Power BI, avec des enjeux de fiabilisation des données et d’optimisation des traitements. Des évolutions de la chaîne Data et BI sont également à l’étude, notamment autour de Looker.

Nous recherchons un profil disposant d’une solide expérience opérationnelle dans le développement de traitements de données sur GCP.

Missions envisagées

• Analyser les besoins métier et les traduire en spécifications techniques.

• Concevoir et développer des pipelines d’ingestion, de transformation et de mise à disposition des données.

• Faire évoluer les traitements existants et optimiser leurs performances, leur fiabilité et leurs coûts d’exécution.

• Participer à la migration ou à la réécriture de traitements selon la trajectoire technique retenue.

• Mettre en place des tests, des contrôles de qualité et des mécanismes de suivi des traitements et de gestion des erreurs.

• Collaborer avec les équipes BI pour préparer les données nécessaires aux modèles sémantiques et aux restitutions.

• Contribuer à la traçabilité des données et aux bonnes pratiques de gouvernance.

• Documenter les développements et assurer le transfert de connaissances auprès des équipes internes.

Profil recherché

• Expérience confirmée en Data Engineering, avec des réalisations concrètes sur GCP.

• Solides compétences en développement de traitements de données et en SQL.

• Capacité à prendre en charge un développement, de la conception à la mise en production et à sa maintenance.

• Expérience dans l’optimisation, la migration ou la refonte de pipelines de données.

• Sensibilité aux enjeux de qualité, de maintenabilité et de maîtrise des coûts.

• Autonomie, rigueur et capacité à travailler avec des équipes réparties sur plusieurs sites.

Une connaissance de Microsoft Fabric, Power BI ou Looker serait appréciée.