Data Engineer GCP (H/F)

DGTL Performance; Valbonne; Hybrid; EUR 75,000 - 110,000; Full time

Benefits offered by this job

Télétravail 2 jours/semaine

Localisation Valbonne

Job summary

DGTL Performance recherche un Data Engineer expérimenté pour rejoindre une équipe data au sein d'un grand groupe du secteur marketing et de la transformation numérique. Vous piloterez l'architecture et l'implémentation de la plateforme PCS, en exploitant la puissance de Google Cloud Platform et les technologies de traitement en temps réel.

Vous serez en charge de concevoir et de maintenir des architectures robustes de traitement de données temps réel, en assurant la scalabilité, la fiabilité et

Qualifications

• Minimum 5 ans d'expérience en data engineering et architectures temps réel.
• Expérience significative avec Google Cloud Platform et BigQuery - niveau confirmé.
• Maîtrise d'au moins Java ou Python - niveau autonome.
• Français: obligatoire; Anglais: niveau B2 minimum.
• Capacité à travailler en environnement Agile/Scrum.

Responsibilities

• Concevoir et implémenter des architectures de traitement temps réel utilisant Apache Beam, Spark Streaming, Flink ou technologies équivalentes.
• Piloter les décisions architecturales et techniques pour la plateforme PCS.
• Développer et optimiser des pipelines de données sur GCP (BigQuery, Dataflow, Dataproc, Bigtable).
• Garantir la qualité, la scalabilité et la performance des solutions data.
• Collaborer avec les équipes multidisciplinaires dans un environnement multiculturel.
• Documenter les architectures et les décisions techniques.
• Participer aux ateliers de conception et aux revues de code.
• Mentorer les membres juniors de l'équipe sur les bonnes pratiques.

Skills

Esprit d'équipe

Autonomie

Rigueur

Boa communication

Anglais (B2)

Tools

Apache Beam

Spark Streaming

Flink

BigQuery

Dataflow

Dataproc

Bigtable

Java

Python

CI/CD

Terraform

GitHub Actions

Git

SQL

Job description

DGTL / Signe + est le facilitateur pour tous les acteurs qui recherchent des ressources ou des missions DATA.
Spécialiste du marché Data et BI, nous intervenons dans toute la France comme à l'étranger ; en sous-traitance, pré-embauche, recrutement, portage commercial, portage salarial, etc.
Depuis 2018, nous accompagnons nos clients avec proximité, juste prix et préoccupation éthique de tous les instants.
https://www.dgtl-performance.com

Le poste :

Nous recherchons un Data Engineer expérimenté pour rejoindre une équipe data au sein d'un grand groupe du secteur marketing et de la transformation numérique. Vous piloterez l'architecture et l'implémentation de la plateforme PCS, en exploitant la puissance de Google Cloud Platform et les technologies de traitement en temps réel.

Vous serez en charge de concevoir et de maintenir des architectures robustes de traitement de données temps réel, en assurant la scalabilité, la fiabilité et la performance des pipelines de données. Votre expertise technique et votre capacité à guider les décisions architecturales seront essentielles pour garantir l'alignement avec les objectifs métier et les meilleures pratiques du secteur. Vous travaillerez en environnement Agile/Scrum, en collaboration étroite avec les équipes de développement et les stakeholders.

Responsabilités :

• Concevoir et implémenter des architectures de traitement temps réel utilisant Apache Beam, Spark Streaming, Flink ou technologies équivalentes
• Piloter les décisions architecturales et techniques pour la plateforme PCS
• Développer et optimiser des pipelines de données robustes sur GCP (BigQuery, Dataflow, Dataproc, Bigtable)
• Garantir la qualité, la scalabilité et la performance des solutions data
• Collaborer avec les équipes multidisciplinaires dans un environnement multiculturel
• Documenter les architectures et les décisions techniques
• Participer aux ateliers de conception et aux revues de code
• Mentorer les membres juniors de l'équipe sur les bonnes pratiques

Télétravail : 2 jours par semaine
Localisation : Valbonne

Profil recherché :

Indispensables :

• Minimum 5 ans d'expérience en data engineering et architectures temps réel
• Expertise avérée en traitement de données temps réel (Apache Beam, Spark Streaming, Flink ou équivalent) - niveau autonome
• Expérience significative avec Google Cloud Platform et BigQuery - niveau confirmé (niveau 3)
• Maîtrise d'au moins Java ou Python - niveau autonome (niveau 3)
• Compétences en CI/CD et DevOps - niveau autonome
• Autonomie, rigueur et communication exceptionnelles
• Esprit d'équipe et capacité d'adaptation
• Proactivité et dynamisme
• À l'aise dans un environnement multiculturel
• Français : obligatoire
• Anglais : niveau B2 minimum

Fortement appréciés :

• Expérience confirmée avec Spark - niveau autonome
• Expérience confirmée avec Spark Streaming - niveau autonome
• Expérience avec Apache Beam - niveau autonome
• Expérience avec Flink - niveau autonome
• Expérience avec Kafka - niveau autonome
• Compétences en Terraform - niveau autonome
• Utilisation de Github Actions pour le déploiement - niveau autonome
• Maîtrise de GIT - niveau autonome
• Bigtable et Dataproc sur GCP - niveau autonome
• Compétences SQL génériques avancées - niveau confirmé
• Connaissance d'Agile et SCRUM - niveau basique
• Utilisation de JIRA et Confluence - niveau autonome
• Expérience avec les méthodologies Agile et outils collaboratifs