Data ingénieur [civil]

French cyber command; Saint-Jacques-de-la-Lande; Sur place; EUR 42 000 - 63 000; Plein temps

Résumé du poste

Le Responsable Data Engineer est intégré à la section DATA de la division DAO du CALID et exerce à Rennes. Il conçoit, développe et maintient des pipelines de données pour collecter, transformer et charger des données variées, en assurant leur disponibilité dans des bases SQL/NoSQL exploitées par les analystes cybersécurité.

Le poste implique l’industrialisation et l’optimisation des traitements, une collaboration avec les data scientists et la production de rapports/ tableaux de bord pour

Qualifications

• Formation en informatique ou équivalent exigée, avec 3–5 ans d’expérience dans le Data Engineering/Big Data
• Expérience appréciée en cyber et exploitation de données complexes
• Maîtrise de Python, SQL et Spark
• Connaissance des bases SQL/NoSQL et des outils d’orchestration comme Airflow
• Expérience avec stockage et calcul distribué (Spark, HDFS) et démarche DevOps (CI/CD)
• Capacité à documenter et à collaborer avec des data scientists et analystes cybersécurité

Responsabilités

• Concevoir et maintenir des pipelines de données robustes et scalables
• Gérer l’accès et la disponibilité des données dans SQL/NoSQL utilisées par les équipes
• Participer à l’administration et à l’optimisation de l’architecture Big Data du Centre
• Collaborer avec les data scientists pour valoriser les données et soutenir la détection d’attaques
• Créer des rapports et tableaux de bord pour faciliter la prise de décision
• Fournir un support technique et assurer une veille technologique

Connaissances

Python programming

SQL

Spark

DevOps

Data collaboration

Outils

Airflow

PostgreSQL

Elasticsearch

Spark

HDFS

Description du poste

L’affrontement dans le cyberespace est désormais une réalité. La menace cyber est permanente et en évolution continue. Le Commandement de la cyberdéfense (COMCYBER) est garant de la cohérence des actions militaires du domaine. A ce titre, le COMCYBER épaule l’ensemble du Ministère des Armées dans le recrutement de plus de 1 000 cybercombattants à horizon 2030 qui rejoindront des missions de renseignement, de protection, de défense et d’action dans le cyberespace.

La section DATA intégrée à la division appui aux opérations (DAO) du CALID est implantée à Rennes. Son rôle est de gérer, valoriser les données et chaînes de traitement pour améliorer les capacités opérationnelles des différentes divisions du CALID. Le Data Engineer a pour mission le traitement et la valorisation du Big Data sous toutes ses formes. Il réalise principalement des développements permettant de gérer les flux de données, de valoriser les données et de mettre en place des algorithmes qui répondent aux besoins spécifiques du centre. Le titulaire du poste intervient également dans l’industrialisation, la mise en production et l’optimisation de traitements sur les données en lien avec les équipes métier.

Référence 0ARA002980

PRINCIPALES

• Concevoir, développer et maintenir des pipelines de données robustes et évolutifs pour collecter, transformer et charger des données de formats multiples et provenant de diverses sources.
• Assurer la mise à disposition des données dans les bases de données (SQL/NoSQL) exploitées par les équipes métier (cyber threat intelligence, détection, réponse à incident) ;
• Participer à l’administration et à la maintenance applicative de l’architecture big data du Centre, à la résolution des problèmes techniques, et rechercher à optimiser ses performances ;
• Collaborer avec les data scientists pour comprendre leurs besoins de valorisation des données pour la recherche d’attaques cyber, et fournir des solutions techniques adaptées.
• Créer des rapports et des tableaux de bord pour visualiser les données et faciliter la prise de décision des analystes en cybersécurité.
• Fournir un appui technique aux utilisateurs finaux et aux autres équipes, sur le périmètre de la section.
• Assurer une veille technologique.

L’environnement technique :

Issu d'une formation en informatique, vous avez acquis une expérience de 3 à 5 ans minimum dans le domaine du Data Engineering, de la Data Architecture ou du Big Data. Une expérience en cyber et/ou dans l’exploitation de données complexes est aussi appréciée.

Compétences mises en œuvre dans le cadre du poste :

• Maîtrise des langages courants de programmation et de données dans le domaine (Python, SQL, Spark, etc.).
• Connaissance des bases de données relationnelles (Postgres, etc.) et non relationnelles (Elasticsearch, etc.)
• Expérience avec des outils d'orchestration (Airflow, etc.)
• Expérience avec des outils de stockage et de calcul distribué (Spark, HDFS, etc.)
• Démarche DevOps (CI/CD, tests)
• Exploitation et rédaction de documentation technique et référentiels ;
• Capacité à travailler en équipe et à collaborer avec des analystes en cybersécurité ;
• Sens de l'organisation et rigueur.