Ingénieur DevOps DataOps – CI/CD & Big Data

Astek; Brest; Sur place; EUR 65 000 - 90 000; Plein temps

Résumé du poste

Astek Brest recrute un ingénieur DevOps confirmé pour piloter l’automatisation, la scalabilité et la fiabilité des pipelines et des infrastructures de données sur des projets navals. Vous intervenez dans la transformation digitale et l’industrialisation des déploiements Cloud.

Vous serez responsable des pipelines CI/CD (GitLab CI, Jenkins), du monitoring et de l’orchestration DataOps (Airflow, NiFi, Rundeck) et vous collaborerez avec Data Engineering et Infrastructure pour assurer performance et

Qualifications

• Diplôme d’ingénieur ou équivalent Bac+5, spécialisation DevOps ou Big Data.
• Expérience confirmée sur un poste DevOps/DataOps (2-5 ans minimum).
• Maîtrise des pipelines CI/CD (GitLab CI, Jenkins), outils d’automatisation et d’infrastructure as code (Terraform, Ansible).
• Expérience avec plateformes Big Data et traitement distribué (Cloudera, Spark, Hive, HDFS).
• Connaissance des pratiques de sécurité et gouvernance des données.
• Esprit d’équipe, sens analytique et curiosité technologique.

Responsabilités

• Concevoir, déployer et optimiser les pipelines CI/CD pour les applications et traitements de données, notamment les jobs Spark développés en Java et Python.
• Automatiser l’intégration, le déploiement et le monitoring des applications sur la Data Platform.
• Collaborer avec les équipes Data Engineering pour garantir l’intégrité, la performance et la scalabilité des flux de données, en temps réel et batch.
• Mettre en place et superviser des mécanismes d’orchestration de données (Airflow, NiFi, Rundeck) et des tests automatisés pour assurer fiabilité et performance.
• Participer à la gestion et l’optimisation des environnements Big Data (Cloudera, HDFS, Hive) et ajuster les ressources avec les équipes infrastructure.
• Implémenter les politiques de sécurité et de gouvernance des données (chiffrement, droits d’accès, traçabilité) et promouvoir la culture DataOps au sein des équipes.

Connaissances

DevOps

Big Data mindset

Analytical thinking

Team collaboration

Problem solving

Formation

Diplôme d’ingénieur Bac+5 ou équivalent

Outils

GitLab CI

Jenkins

Terraform

Ansible

Cloudera

Spark

Hive

HDFS

Airflow

NiFi

Rundeck

Control-M

Linux

Docker/Podman

Description du poste

Astek Brest recrute un ingénieur DevOps confirmé pour piloter l’automatisation, la scalabilité et la fiabilité des pipelines et des infrastructures de données sur des projets navals. Vous intervenez dans la transformation digitale et l’industrialisation des déploiements Cloud.

Vous serez responsable des pipelines CI/CD (GitLab CI, Jenkins), du monitoring et de l’orchestration DataOps (Airflow, NiFi, Rundeck) et vous collaborerez avec Data Engineering et Infrastructure pour assurer performance et