Data Engineer Confirmé (H/F)

Onyx-Conseil; Lille; Sur place; EUR 55 000 - 75 000; Plein temps

Résumé du poste

Onyx-Conseil recherche un Data Engineer confirmé pour rejoindre une équipe Data pluridisciplinaire à Lille (59). Le candidat interviendra sur des projets Data en cloud à forte volumétrie, en collaboration avec des experts DevSecFinOps, autour des données Supply et des API Data.

Vous concevrez et développerez des solutions data, modèlerez les flux et participerez activement aux tests, à la documentation et au run des pipelines, tout en optimisant les coûts cloud et en garantissant la gouvernance

Qualifications

• Concepteur et développement de solutions Data dans un environnement cloud.
• Expérience avérée en gestion de projets data et en FinOps/optimisation des coûts cloud.

Responsabilités

• Concevoir et développer des flux de données alignés avec les standards Data de l’entreprise.
• Maintenir et faire évoluer les pipelines data et les référentiels multi-sources.
• Participer à la mise en production via CI/CD et assurer le monitoring des flux.
• Contribuer à l’optimisation des coûts d’exploitation cloud (FinOps).

Connaissances

Data engineering

GCP

BigQuery

Apache Airflow

Terraform

GitLab

Python

Shell

Outils

GitLab (CI/CD)

Terraform

Apache Airflow

Description du poste

Démarrage : ASAP

Localisation : Lille (59) avec 3 jours sur site/semaine

Pour le compte d'un grand acteur international du secteur retail, nous recherchons un Data Engineer confirmé pour rejoindre une équipe Data pluridisciplinaire au sein d'un environnement cloud à forte volumétrie.

Le contexte :

Vous intégrerez une équipe composée de Data Engineers et d'experts DevSecFinOps, intervenant sur des projets stratégiques liés à la Supply Chain et à la valorisation de la donnée.

Vous contribuerez à la conception, au développement et au maintien de solutions Data tout en participant à une démarche FinOps visant à optimiser les coûts d'exploitation des plateformes cloud.

Vos missions : Build

• Participer aux projets Data liés aux enjeux Supply.
• Concevoir des solutions alignées avec les standards et frameworks Data de l'entreprise.
• Développer et modéliser les flux de données sous la gouvernance des architectes Data.
• Contribuer au développement d'applications Data.
• Réaliser les tests et validations techniques.
• Assurer le suivi et le reporting de vos activités.

Run

• Maintenir en conditions opérationnelles plusieurs référentiels de données multi-sources ainsi que différentes applications Data.
• Gérer les incidents et demandes de support.
• Assurer les mises en production via les outils de CI/CD.
• Superviser et suivre les flux de données.

Expertise

• Monter progressivement en compétence sur le système d'information et les domaines métiers associés.
• Participer à l'amélioration continue des pratiques Data et FinOps.

Environnement technique :

• GCP
• BigQuery
• Apache Airflow
• Terraform
• GitLab
• Datalake
• Exposition de données / APIs Data
• Google Data Studio
• Python
• Shell