Ingénieur de données intermédiaire – Qualité des données (Microsoft Fabric)

Optisigma Inc.; Montreal; Hybride; CAD 90 000 - 120 000; Plein temps

Avantages offerts par ce poste

Assurances collectives

REER

Formations professionnelles

Équipe à taille humaine

Résumé du poste

Optisigma Inc. recherche un ingénieur données / BI pour bâtir des contrôles automatisés mesurant la qualité des données importées dans Microsoft Fabric selon les dimensions clés et transposer les règles de gouvernance en vérifications exécutées à chaque chargement.

Vous modéliserez les données et construirez des modèles Power BI, alignerez la solution aux architectures existantes et assurerez le suivi des anomalies et de la performance.

Qualifications

• Maîtrise des langages SQL/T-SQL et Python.
• Connaissance de Power BI et de DAX.
• Expérience avérée en gouvernance et qualité des données.

Responsabilités

• Bâtir des contrôles automatisés mesurant la qualité des données importées dans Microsoft Fabric.
• Transposer les règles de gouvernance en vérifications techniques automatiques.
• Constituer l'historique des résultats et suivre les anomalies dans le temps.
• Instrumenter l'exécution des contrôles pour suivre les volumes, erreurs et résultats.
• Modéliser les données et construire les modèles sémantiques Power BI.
• Aligner la solution avec les architectures existantes et la rendre extensible.
• Optimiser les performances SQL, Spark et pipelines.
• Mettre en place le versionnage et les pipelines CI/CD.
• Rédiger la documentation technique et soutenir l'adoption de la solution.

Connaissances

SQL

T-SQL

Python

DAX

JSON

Git/GitHub

Power BI

Formation

Baccalauréat en technologies de l'information, en administration des affaires, en gestion ou dans un domaine connexe

Outils

Microsoft Fabric

Databricks

Azure Data Lake Gen2

Data Factory

Microsoft Purview

Description du poste

• Bâtir des contrôles automatisés qui mesurent la qualité des données importées dans Microsoft Fabric selon plusieurs dimensions : complétude, validité, exactitude, cohérence, unicité, intégrité référentielle et fraîcheur;
• Transposer les règles de qualité formulées par l'équipe de gouvernance en vérifications techniques exécutées automatiquement à chaque chargement;
• Constituer l'historique des résultats et mettre en place le repérage, le classement et le suivi des anomalies afin de suivre l'évolution de la qualité dans le temps;
• Instrumenter l'exécution des contrôles pour suivre les volumes traités, les erreurs et les résultats obtenus;
• Modéliser les données et construire les modèles sémantiques Power BI qui exploitent les indicateurs de qualité;
• Arrimer la solution aux architectures et patrons de traitement existants, tout en la concevant assez générique pour l'étendre progressivement à d'autres sources de données;
• Ajuster la performance des requêtes SQL, des traitements Spark, des pipelines et des notebooks sur de gros volumes de données;
• Instaurer le versionnage et les pipelines CI/CD des règles, traitements et composants livrés;
• Valider les choix d'implantation avec l'équipe de gouvernance, rédiger la documentation technique et soutenir les équipes dans l'adoption de la solution.

Tu as le profil suivant :

• Baccalauréat en technologies de l'information, en administration des affaires, en gestion ou dans un domaine connexe;
• Au moins 5 années d'expérience en ingénierie de données;
• Plus de 4 années d'expérience en intelligence d'affaires, dont 3 années en ingénierie de données dans le secteur de la santé;
• Au moins 1 année d'expérience avec Microsoft Fabric ou Databricks;
• Participation active à au moins 2 mandats de développement de solutions analytiques intégrant des systèmes d'information cliniques;
• Expérience en développement de contrôles automatisés de la qualité des données, en implantation de règles couvrant plusieurs dimensions et en historisation des résultats;
• Expérience des pratiques d'intégration et de déploiement continus (CI/CD) et de la livraison automatisée de solutions de données;
• Maîtrise de SQL, T-SQL, Python, DAX, JSON, Git/GitHub et Power BI;
• Connaissance de Microsoft Fabric (Lakehouse, Data Warehouse, Direct Lake, pipelines, notebooks) et des environnements Spark;
• Connaissance d'Azure (Data Lake Gen2, Data Factory) et d'outils de gouvernance et de métadonnées (Microsoft Purview);
• Certification de spécialisation reconnue dans le domaine des technologies de l'information (atout);
• Communiquer aisément à l'oral comme à l'écrit dans un français professionnel.

Informations contractuelles

Nos avantages :

• Assurances collectives comprenant le dentaire, la télémédecine, le paramédical++
• Des programmes REER
• Des formations adaptées à tes objectifs professionnels
• Une équipe dynamique à taille humaine, à l'écoute de tes besoins
• Et bien plus !

Mode de travail:

• Mode hybride : un jour par semaine en présentiel à Montréal ou dans la région de Québec, le reste en télétravail