GCP Data Engineer: Pipelines, BigQuery & Spark – Télétravail

WHIZE; Neuilly-sur-Seine; Hybride; EUR 65 000 - 110 000; Plein temps

Résumé du poste

WHIZE, filiale du groupe Neurones, recherche un GCP Data Engineer pour concevoir et optimiser les flux de données sur Google Cloud Platform et livrer des datasets fiables pour les Data Analysts et Data Scientists.

Vous travaillerez sur l’intégration de sources variées, le développement de pipelines et l’optimisation des coûts, avec une forte composante sécurité et gouvernance des données, en mode hybride à Neuilly-sur-Seine.

Qualifications

• Expérience en Data Engineering, dont une partie significative sur GCP.
• Solides compétences en SQL et en programmation orientée Data.
• Maîtrise d’au moins plusieurs services GCP orientés data (BigQuery, Dataflow, Dataproc, Pub/Sub, Cloud Storage…).
• Expérience avec PySpark ou Spark pour le traitement de données.
• Connaissance des architectures Data Lake et Data Warehouse sur GCP.
• Sensibilité aux problématiques de sécurité, gouvernance et optimisation des coûts.
• Capacité à travailler en équipe et à communiquer avec des profils techniques et métiers.

Responsabilités

• Concevoir, développer et maintenir des pipelines de données sur GCP.
• Intégrer et transformer des données issues de sources variées (bases SQL/NoSQL, API, ERP, CRM, fichiers plats…).
• Utiliser les services GCP tels que BigQuery, Dataflow, Dataproc, Pub/Sub, Cloud Storage, Composer ou Looker.
• Développer des traitements distribués et optimisés avec PySpark ou Spark sur Dataproc.
• Orchestrer et automatiser les workflows avec Cloud Composer (Airflow) ou équivalents.
• Mettre en place des contrôles de qualité, cohérence et sécurité des données (IAM, Data Catalog, DLP).
• Collaborer avec les équipes Data et IT pour fournir des datasets prêts à l’emploi.
• Participer à la veille technologique sur GCP et les solutions data cloud.

Connaissances

SQL

Data Engineering

Cloud computing

Teamwork

Communication

Outils

BigQuery

Dataflow

Dataproc

Pub/Sub

Cloud Storage

Composer

Looker

Description du poste

WHIZE, filiale du groupe Neurones, recherche un GCP Data Engineer pour concevoir et optimiser les flux de données sur Google Cloud Platform et livrer des datasets fiables pour les Data Analysts et Data Scientists.

Vous travaillerez sur l’intégration de sources variées, le développement de pipelines et l’optimisation des coûts, avec une forte composante sécurité et gouvernance des données, en mode hybride à Neuilly-sur-Seine.