Ingénieur Data Senior H/F

MGI Consultants; Paris; Sur place; EUR 50 000 - 70 000; Plein temps

Résumé du poste

MGI Consultants recherche un(e) Ingénieur(e) Data Senior à Paris pour rejoindre l'équipe Data Connect. Vous serez chargé(e) d'implémenter des solutions de gestion des données tout en assurant la qualité de la donnée à travers des pipelines automatisés sur Databricks. Le candidat idéal maîtrise Azure Machine Learning et LLM, et doit être capable d'analyser les besoins métier et d'améliorer les processus de traitement de la donnée.

Qualifications

• Compréhension et analyse des besoins des différents acteurs de la donnée.
• Automatisation de la création et du déploiement de pipelines de données sur Databricks.
• Développement de produits de qualité pour garantir l'accès à des données gouvernées.

Responsabilités

• Analyser et proposer des solutions techniques adaptées.
• Automatiser la création et déploiement de pipelines de données robustes.
• Développer des produits pour assurer la qualité des données.
• Participer aux workshops pour enrichir la vision du produit.
• Améliorer les processus internes et standardiser des flux.

Connaissances

Azure Machine Learning

LLM

Description du poste

Nous recherchons un(e) Ingénieur(e) Data Senior H/F pour accompagner un grand groupe du secteur industriel, présent dans plus de 130 pays.

Au sein du département Digital IT/Deploy IT, le Senior Data Engineer devra intégrer la squad Data Connect qui est en charge de l’implémentation de produits data augmentés par l’IA pour accélérer la delivery des projets data et principalement l’ingestion de données dans le but de faciliter l’accès à la donnée legacy aux différents consommateurs (Cognite Data Fusion, RC et EP Surface Data Hub, dashboards Power BI, produits digitaux…)

Vos missions sont les suivantes :

• Comprendre, analyser et proposer des solutions techniques répondant aux besoins des différents acteurs de la donnée (spécialistes métier, domain managers, architectes, data scientists),
• Dans une logique de mise en production, automatiser la création et le déploiement de pipelines de données robustes sur Databricks, ADF, extracteurs Cognite Data Fusion ou autres (collecte, stockage, exposition),
• Développer le produit Data Connect Monitoring afin d’assurer une bonne qualité des données pour les différents consommateurs (préparation, complétude, épuration, enrichissement) dans le but d’exposer une donnée gouvernée, monitorée et de qualité,
• Participer activement aux différents workshops afin d’enrichir la vision produit et contribuer également à l’amélioration des outils utilisés (monitoring, observabilité, exposition…)
• Améliorer les processus internes : localisation et traçabilité de la donnée, standardisation des flux et des scripts de traitement des données, documentation.

Compétences techniques :

• Avancé : Azure Machine Learning, LLM

Informations complémentaires :

Démarrage : Asap

Localisation : Paris