Data Engineer / Data Ops .net - confirmé

Andema; Lille; On-site; EUR 60,000 - 90,000; Full time

Job summary

Free-Work recherche un profil Data Engineering pour rejoindre l'équipe Data et collaborer avec le Head of Data. Vous concevez, orchestrez et optimisez les flux de données, gérez les API et alimentez les composants du Data Hub.

Vos missions couvrent l'ingénierie et l'orchestration des flux (batch et réel avec Pub/Sub), le développement d'API et de connecteurs pour les architectures BFF et Dynamics, et les pratiques DevOps, avec une exploration des usages de l'IA pour améliorer les intégrations.

Qualifications

• Concevoir et orchestrer les flux de données en batch et temps réel.
• Développer et maintenir API et connecteurs pour Data Hub.
• Automatiser avec des scripts Bash et explorer l’IA pour optimiser les développements et l’intégration des données.

Responsibilities

• Ingénierie Data et Orchestration: Gestion et automatisation des flux de données en batchs et temps réel (Pub/Sub), orchestration via Azure Data Factory et intégration dans l’environnement Data Fabric.

Skills

Ingénierie Data

Orchestration

Développement API

Connecteurs

DevOps

Bash scripting

Azure Data Factory

Data Fabric

IA appliquée

Tools

Azure Data Factory

Google Pub/Sub

Data Fabric

Job description

Au sein de l'équipe Data et en étroite collaboration avec le Head of Data, vous intervenez à la jonction du développement applicatif et de l'ingénierie des données. Votre rôle consiste à concevoir, orchestrer et optimiser les flux de données, la gestion des API et l'alimentation des différentes briques du Data Hub.

Missions:

• Ingénierie Data et Orchestration Gestion et automatisation des flux de données en batchs et temps réel (Pub/Sub), orchestration via Azure Data Factory et intégration dans l'environnement Data Fabric.

• Développement et Connectivité Développement et maintenance d'API et de connecteurs pour alimenter les architectures BFF, Dynamics et les applications du Data Hub.

• Pratiques DevOps et Innovation Mise en place de scripts d'automatisation (bash) et exploration des usages de l'Intelligence Artificielle pour optimiser les développements et l'intégration des données.