INGÉNIEUR DE DONNÉES INTERMÉDIAIRE (R22 - VIM/VNA)

Chrome Technologies; Montreal; Hybride; CAD 90 000 - 130 000; Plein temps

Résumé du poste

Chrome Technologies recherche un ingénieur de données intermédiaire pour ses bureaux de Montréal ou Québec, en poste permanent et hybride (présence sur site 1 jour/semaine). Vous contribuerez à la qualité des données du système R22 et collaborerez avec les équipes gouvernance et données.

Vous déployerez des mécanismes de mesure, développerez des traitements, modèles sémantiques et intégrerez les solutions avec Microsoft Fabric et Power BI, tout en assurant l’optimisation des pipelines et CI/CD.

Qualifications

• Maîtrise du français parlé et écrit.
• Baccalauréat (1er cycle) en TI ou domaine connexe.
• Détention d’une certification spécialisée en TI reconnue.
• 5 ans d’expérience en ingénierie de données.
• Plus de 4 ans d’expérience en intelligence d’affaires, dont 3 ans en ingénierie de données dans le réseau de la santé du Québec.
• 1 an d’expérience avec Fabric ou Databricks.
• Expérience avec CI/CD et livraison automatisée de solutions de données.
• Maîtrise des outils: Git/GitHub, SQL, Python, Power BI.
• Connaissances de Fabric, Spark, et de l’environnement Azure.
• Connaissance des métriques de qualité et modélisation de données.

Responsabilités

• Définir et mettre en oeuvre les mécanismes de mesure et de contrôle de la qualité des données.
• Concevoir et développer les traitements mesurant les dimensions de qualité des données (complétude, validité, exactitude, cohérence).
• Concevoir des mécanismes d’exécution automatique des contrôles lors des mises à jour.
• Mettre en place l’historisation des résultats et le suivi temporel des métriques.
• Maintenir les modèles de données et sémantiques pour l’exploitation des métriques dans Power BI.
• Intégrer les mécanismes de mesure aux architectures et patrons de traitement existants dans Fabric.
• Optimiser les traitements et pipelines pour de gros volumes de données.
• Travailler avec CI/CD et déployer les composants développés.

Connaissances

SQL

Python

Power BI

Git/GitHub

DAX

T-SQL

Azure

Databricks

Fabric

Formation

Baccalauréat en TI

Certification TI reconnue

Outils

Microsoft Fabric

Azure Data Lake Gen2

Data Factory

Spark

Notebooks

Databricks

Description du poste

Description

Nous recherchons un Ingénieur de données intermédiaire (R22 - VIM/VNA) afin de rejoindre notre équipe de conseillers du bureau de Québec ou de Montréal dans le cadre d'un poste permanent.

Référence

2273/MTL/0910

Date de démarrage

Au plus vite

Localisation du poste

Montréal ou Québec (hybride)

Durée

Permanent

Ce poste est en mode hybride nécessitant une présence sur site un jour par semaine à Québec ou à Montréal.

Agissant à titre de conseiller / consultant de Chrome Technologies, le candidat interviendra auprès de nos clients dans la réalisation des projets qu'ils nous ont confiés.

Tâches

n plus des PRINCIPALES ACTIVITÉS décrites au devis de l'appel d'offres, l'ingénieur de données intermédiaire effectuera les activités suivantes: Définir et mettre en oeuvre les mécanismes de mesure et de contrôle de la qualité des données provenant de la banque de données provinciale R22 sur la rémunération des employés; Traduire les règles de qualité définies par l'équipe de gouvernance des données et les responsables fonctionnels de R22 en règles et contrôles techniques automatisés; Concevoir et développer les traitements permettant de mesurer les différentes dimensions de la qualité des données, notamment la complétude, la validité, l'exactitude, la cohérence, l'unicité, l'intégrité référentielle et la fraîcheur; Concevoir les mécanismes permettant d'exécuter automatiquement les contrôles de qualité lors des mises à jour des données R22; Développer les mécanismes d'historisation des résultats afin de permettre le suivi de l'évolution de la qualité des données dans le temps; Développer les mécanismes d'identification, de catégorisation et de suivi des anomalies de qualité, notamment au niveau des enregistrements, attributs et objets d'information; Concevoir les mécanismes permettant de suivre l'exécution des contrôles, les volumes traités, les erreurs, les temps d'exécution et les résultats obtenus; Concevoir et maintenir les modèles de données et modèles sémantiques nécessaires à l'exploitation des métriques de qualité dans Power BI; Assurer l'intégration des mécanismes de mesure de la qualité aux architectures et patrons de traitement de données existants dans Microsoft Fabric; Concevoir une solution suffisamment générique et réutilisable pour permettre l'application progressive des mécanismes de mesure à d'autres banques de données ministérielles et sources de rémunération; Optimiser les traitements de qualité, les requêtes, les pipelines et les notebooks afin d'assurer leur performance sur des volumes importants de données; Mettre en place les mécanismes de contrôle de version, d'intégration continue et de déploiement continu (CI/CD) pour les traitements, règles de qualité et composants développés; Collaborer avec les responsables fonctionnels de R22 et l'équipe de gouvernance des données afin de valider la traduction technique des règles de qualité et de résoudre les enjeux d'implantation; Documenter les principaux traitements, règles, métriques et mécanismes techniques mis en place; Accompagner les équipes dans la mise en oeuvre et l'évolution de la solution de mesure de la qualité des données.

Exigences

• Maîtrise de la langue française parlée et écrite.
• Baccalauréat (1er cycle) dans le domaine des technologies de l'information, en administration des affaires, en gestion ou dans un domaine connexe;
• Détenir une certification de spécialisation délivrée par une autorité compétente et reconnue dans le domaine des technologies de l'information.
• Posséder CINQ (5) ans d'expérience en ingénierie de données;
• Détenir plus de QUATRE (4) ans d'expérience en intelligence d'affaires, dont TROIS (3) ans en ingénierie de données dans le réseau de la santé du Québec;
• Détenir UN (1) an d'expérience avec Fabric ou Databricks;
• Démontrer la participation active à au moins DEUX (2) mandats dans le développement de solutions analytiques intégrant des systèmes d'informations cliniques provinciaux et des établissements (ex. Clinibase, SIURGE, Med-urge, BDCU, MED-ECHO, Opera, SIMASS, SILP);
• Posséder une expérience en développement de mécanismes automatisés de contrôle et de mesure de la qualité des données;
• Posséder une expérience dans l'implantation de règles de qualité couvrant plusieurs dimensions des données et dans l'historisation des résultats de contrôle;
• Posséder une expérience avec les pratiques d'intégration et de déploiement continus (CI/CD) et la livraison automatisée de solutions de données.
• Outils et langages : Git/GitHub, SQL, Python, Power BI;
• Connaissances de Microsoft Fabric (Lakehouse, Data Warehouse, Direct Lake, pipelines, notebooks) et des environnements Spark;
• Maîtrise de T-SQL, DAX et formats JSON;
• Connaissance d'outils et plateformes Azure (p. ex. Azure Data Lake Gen2, Data Factory) et d'outils de gouvernance et de métadonnées (p. ex. Microsoft Purview);
• Connaissance des principes et méthodes de mesure de la qualité des données, notamment la complétude, la validité, l'exactitude, la cohérence, l'unicité, l'intégrité référentielle et la fraîcheur;
• Expérience dans la conception de traitements automatisés permettant le calcul, l'historisation et le suivi de métriques de qualité des données;
• Connaissance des techniques d'optimisation des requêtes SQL, des traitements Spark, des pipelines et des notebooks;
• Connaissance des pratiques de contrôle de version, d'intégration continue et de déploiement continu (CI/CD);
• Connaissance des principes de modélisation de données et capacité à concevoir des modèles sémantiques adaptés à l'exploitation des métriques de qualité;
• Bonne compréhension des principes de gouvernance, de sécurité, de traçabilité et de gestion des métadonnées;
• Capacité à traduire des règles de gouvernance et de qualité des données en contrôles techniques automatisés.

Retour