DataOps Engineer - Data Pipelines & DevOps

ACENSI; Brussel Hoofdstad; On-site; EUR 65,000 - 95,000; Full time

Job summary

ACENSI recherche un DataOps Engineer pour l’un de ses clients du secteur ferroviaire basé à Bruxelles. Vous traduiriez les politiques de gouvernance en architecture DevOps et concevriez les pipelines de données.

Vous maîtrisez Python et SQL (Pandas apprécié), les pratiques CI/CD, Airflow et l’orchestration avec Kubernetes/Docker, ainsi que GitLab/Jira et StarUML. Vous travaillez sur des modèles Kimball et Bronze-Silver-Gold tout en assurant qualité et performance des données.

Qualifications

• Maîtrise des principes CI/CD et Git pour la gestion du code et des pipelines.
• Maîtrise du SQL et du Python (Pandas apprécié) pour manipuler des données.
• Connaissance des modèles de données Kimball et de l’architecture Bronze-Silver-Gold.
• Expérience avec Airflow ou outil équivalent pour l’orchestration des données.
• Gestion et tests qualité des données (unitaires, d’intégration, end-to-end).

Responsibilities

• Traduire les politiques et règles de gouvernance en architecture DevOps et concevoir celle-ci.
• Concevoir et optimiser les pipelines de données et les schémas pour l’analyse.
• Contrôler la qualité des données et des pipelines via des tests.
• Identifier et résoudre les problèmes de performance des flux de données.

Skills

APIs management

Python data manipulation

SQL proficiency

Pandas knowledge

Data pipelines

Data quality testing

Data governance

Kimball modeling

Bronze-Silver-Gold

Airflow orchestration

Kubernetes/OpenShift

Docker

GitLab

Jira

StarUML

Data interoperability

Français/Néerlandais

Tools

Airflow

Jira

StarUML

Kubernetes/OpenShift

Docker

GitLab

Job description

ACENSI recherche un DataOps Engineer pour l’un de ses clients du secteur ferroviaire basé à Bruxelles. Vous traduiriez les politiques de gouvernance en architecture DevOps et concevriez les pipelines de données.

Vous maîtrisez Python et SQL (Pandas apprécié), les pratiques CI/CD, Airflow et l’orchestration avec Kubernetes/Docker, ainsi que GitLab/Jira et StarUML. Vous travaillez sur des modèles Kimball et Bronze-Silver-Gold tout en assurant qualité et performance des données.