Ingénieur Big Data Kestra Senior (H/F)

DGTL Performance; Guyancourt; Hybrid; EUR 70,000 - 100,000; Full time

Benefits offered by this job

Télétravail 2 jours/semaine

Job summary

DGTL Performance recherche un Ingénieur Big Data/Data Engineering pour concevoir, déployer et maintenir une plateforme Big Data hybride, en étroite collaboration avec les équipes applicatives et DevOps. Vous contribuerez à l'automatisation, l'infrastructure as code et les bonnes pratiques DevOps dans un cadre agile.

Le poste est orienté conception et exploitation, avec une emphase sécurité et disponibilité, et une localisation France entière, incluant possibilité d'intervenir à distance selon

Qualifications

• Expérience confirmée (5+ ans) en tant qu'Ingénieur Big Data / Data Engineering.
• Maîtrise Google Cloud Platform (GCP) et services data (BigQuery, Dataflow, Pub/Sub).
• Maîtrise de Terraform et Terragrunt (infrastructure as code).
• Expérience en orchestration de workflows et pipelines (Kestra ou équivalent).
• CI/CD avec GitLab et Kubernetes / Docker.
• Compétences Python et SQL pour le traitement de données.
• Monitoring/Observability avec Prometheus, Grafana, ELK.
• Connaissance architectures hybrides (cloud/on‑premise).
• Bonne communication et travail en équipe agile.

Responsibilities

• Participer à la mise en œuvre, l'optimisation et l'évolution de la plateforme Big Data.
• Développer et maintenir l'infrastructure as code avec Terraform et Terragrunt.
• Automatiser et maintenir les pipelines CI/CD sous GitLab.
• Administrer et faire évoluer les plateformes Big Data et Data Engineering.
• Mettre en œuvre les orchestrateurs de workflows (Kestra, Stratus).
• Mettre en place et maintenir les outils de monitoring et d'observabilité (Prometheus, Grafana, ELK).
• Assurer le maintien en condition opérationnelle des plateformes en environnement distribué.
• Collaborer à la mise en œuvre des bonnes pratiques Cloud, DevOps et GitOps.
• Produire la documentation technique et d'exploitation.
• Participer à l'amélioration continue et proposer des optimisations architecturales.

Skills

GCP

Terraform

Terragrunt

Kubernetes

Docker

Python

SQL

CI/CD

GitLab

Agile/Scrum

DevOps

Communication

Tools

Terraform

Terragrunt

Kubernetes

Docker

GitLab

Prometheus

Grafana

ELK

Kestra

Stratus

PostgreSQL

OpenStack

OpenShift

Ansible

Jenkins

JFrog Artifactory

Vault

Xray

Trivy

Job description

DGTL / Signe + est le facilitateur pour tous les acteurs qui recherchent des ressources ou des missions DATA.

Spécialiste du marché Data et BI, nous intervenons dans toute la France comme à l'étranger ; en sous-traitance, pré-embauche, recrutement, portage commercial, portage salarial, etc.

Depuis 2018, nous accompagnons nos clients avec proximité, juste prix et préoccupation éthique de tous les instants.

https://www.dgtl-performance.com

POSTE / MISSIONS

Rejoignez le pôle de modernisation data d'un acteur majeur du secteur bancaire pour intervenir au sein d'une équipe Big Data de haut niveau. Vous participerez à la conception, l'implémentation et l'administration d'une infrastructure cloud hybride hautement résiliente, combinant les forces de Google Cloud Platform et des infrastructures on-premise.

Le pôle conçoit et opère des plateformes « as a service » facilitating la mise en place d'architectures modernes, distribuées et hautement disponibles pour l'ensemble des entités du groupe. Vous évoluerez dans un environnement technologique riche, centré sur l'automatisation, l'infrastructure as code et les bonnes pratiques DevOps et GitOps, au sein d'équipes agiles et collaboratives.

Le périmètre couvre l'ensemble du cycle de vie des services : de leur conception jusqu'à leur maintien en condition opérationnelle. Vous travaillerez en étroite collaboration avec les équipes applicatives, infrastructures et DevOps, dans un contexte de sécurité renforcée et de haute disponibilité.

Responsabilités

• Participer à la mise en œuvre, l'optimisation et l'évolution de la plateforme Big Data
• Développer et maintenir l'infrastructure as code avec Terraform et Terragrunt
• Automatiser et maintenir les pipelines CI/CD sous GitLab
• Administrer et faire évoluer les plateformes Big Data et Data Engineering
• Mettre en œuvre les orchestrateurs de workflows (Kestra, Stratus) pour l'automatisation des traitements data
• Mettre en place et maintenir les outils de monitoring et d'observabilité (Prometheus, Grafana, ELK)
• Assurer le maintien en condition opérationnelle des plateformes en environnement distribué
• Collaborer à la mise en œuvre des bonnes pratiques Cloud, DevOps et GitOps
• Produire la documentation technique et d'exploitation
• Participer à l'amélioration continue et proposer des optimisations architecturales

Télétravail : 2 jours par semaine

Localisation : Montpellier ou Guyancourt

PROFIL RECHERCHÉ

Indispensables

• Expérience confirmée (5+ ans) en tant qu'Ingénieur Big Data ou Data Engineering
• Solide expertise sur Google Cloud Platform (GCP) et ses services data (BigQuery, Dataflow, Pub/Sub)
• Maîtrise de l'infrastructure as code : Terraform et Terragrunt
• Compétences avancées en orchestration de workflows et pipelines (Kestra ou équivalent)
• Expertise en CI/CD avec GitLab
• Connaissance approfondie de Kubernetes et de la containerisation (Docker)
• Maîtrise de Python et SQL pour le développement et la manipulation de données
• Expérience en administration et monitoring des plateformes data (Prometheus, Grafana, ELK ou équivalents)
• Compréhension des architectures hybrides (cloud et on-premise) et des infrastructures distribuées
• Excellente communication et capacité à collaborer en équipes transversales
• Rigueur, organisation et sens de la qualité
• Expérience en méthodologie Agile et Scrum

Fortement Appréciés

• Expérience avec OpenStack et/ou OpenShift
• Maîtrise d'Ansible pour l'automatisation de l'infrastructure
• Connaissance de PostgreSQL et des bases de données distribuées
• Expérience avec Jenkins et les outils d'artifact management (JFrog Artifactory)
• Familiarité avec les outils de sécurité Cloud (Vault, Xray, Trivy)
• Connaissance de Stratus ou d'autres orchestrateurs data avancés
• Expérience du maintien en condition opérationnelle (MCO) en environnement critique
• Compétences en observabilité avancée et architecture microservices
• Participation à des projets de transformation digitale ou de modernisation d'infrastructure

AVANTAGES

selon profil