Scientifique senior IA

National Bank of Canada; Montreal (administrative region); Hybrid; CAD 120,000 - 160,000; Full time

Benefits offered by this job

Santé et bien-être

Assurance collective

Régime de retraite

Régime d’acquisition d’actions

Aide aux employé·e·s et à leur famille

Services bancaires préférentiels

Initiatives communautaires

Télémédecine

Clinique sommeil

Job summary

National Bank of Canada recherche un scientifique IA senior pour rejoindre l’équipe Gestion du risque de modèle. Vous évaluerez des systèmes IA avancés, développerez des environnements d’essai et contribuerez à l’assurance qualité et à la conformité des solutions d’intelligence artificielle en production.

Le poste nécessite une solide expertise en IA, en analyse quantitative et en ingénierie logicielle, avec une interaction fréquente avec les partenaires et les fournisseurs.

Qualifications

• Expérience en évaluation et validation de systèmes IA
• Conception de métriques et jeux de données de test
• Maîtrise des LLM, systèmes RAG, agents et multimodal
• Connaissances en méthodes statistiques et expériences pertinentes

Responsibilities

• Concevoir des méthodologies et critères d’acceptation pour évaluer les systèmes IA
• Évaluer LLM, systèmes RAG, agents et solutions multimodales selon le profil risque
• Concevoir et faire évoluer des solutions agentiques pour validation des modèles
• Tester les tests contradictoires, red teaming et analyses de sécurité et confidentialité
• Développer des environnements d’essai, des pipelines automatisés et des outils réutilisables
• Produire des conclusions de validation claires et fondées sur données probantes afin d’éclairer la prise de décision
• Contribuer à l’évolution des normes et pratiques de gestion du risque et des exigences de mise en production

Skills

Évaluation IA

Validation de modèles

Python

Pipelines de données

Tests automatisés

Gestion du risque IA

Travail en équipe

Communication

Education

Baccalauréat en informatique

Génie

Mathématiques

Statistique

Science des données

Apprentissage automatique

Tools

API REST

Git

CI/CD

Job description

Une carrière en tant que scientifique senior IA dans l’équipe de Gestion du risque de modèle, à la Banque Nationale, c’est agir à titre de spécialiste de l’évaluation indépendante des systèmes d’intelligence artificielle avancés. Cet emploi te permet d’avoir un impact concret sur la fiabilité, la sécurité et l’utilisation responsable des solutions d’intelligence artificielle de la Banque grâce à ton expertise en évaluation de l’IA, en analyse quantitative, en génie logiciel et en automatisation.

Ton emploi

• Concevoir des méthodologies, métriques, jeux de données de référence et critères d’acceptation pour évaluer les systèmes d’IA
• Évaluer les LLM, systèmes RAG, agents, solutions vocales, de vision et multimodales selon leur profil de risque
• Concevoir, maintenir et faire évoluer des solutions agentiques aux fins de validation des modèles
• Tester les tests contradictoires, les exercices de collaboration rouge et les analyses de robustesse, de sécurité et de confidentialité
• Développer des environnements d’essai, des pipelines automatisés et des outils réutilisables visant à améliorer l’efficacité de la validation
• Produire des conclusions de validation claires, rigoureuses et fondées sur des données probantes afin d’éclairer la prise de décision
• Contribuer à l’évolution des normes, pratiques de gestion du risque et exigences liées à la mise en production des solutions d’intelligence artificielle.

Ton équipe

Au sein du secteur de Gestion du risque de modèle, tu fais partie d’une équipe spécialisée en croissance et tu relèves du directeur principal, Gestion du risque de modèles IA. Notre équipe se distingue par la combinaison d’une expertise approfondie en intelligence artificielle, en données et en automatisation, ainsi que par sa rigueur en matière de gestion du risque. Elle collabore étroitement avec les équipes de développement tout en maintenant l’indépendance nécessaire pour assurer une validation efficace des solutions.

Nous visons à t’offrir un maximum de flexibilité pour favoriser ta qualité de vie. Ceci se traduit notamment par un environnement de travail hybride avec la possibilité de travailler à Toronto, Montréal ou Edmonton.

La Banque valorise le développement continu et la mobilité interne. Nos programmes de formation personnalisés, basés sur l’apprentissage dans l’action, te permettent de maîtriser ton métier et de développer de nouveaux champs d’expertise. Des outils tels que l’Académie de données, la formation linguistique, le Centre d’apprentissage Harvard et de l’accompagnement en coaching et en mentorat te sont accessibles en tout temps.

Prérequis

• Détenir un baccalauréat en informatique, en génie, en mathématiques, en statistique, en science des données, en apprentissage automatique ou dans une discipline connexe et 2 à 5 ans d’expérience pertinente
• Expérience en évaluation de l’IA, validation de modèles, apprentissage automatique, qualité logicielle, red teaming ou risque technologique.
• Expérience dans la conception, le déploiement ou la maintenance d’agents d’IA, d’applications LLM, de systèmes RAG ou d’automatisations fondées sur l’IA
• Maîtrise de Python, des API, des tests automatisés, des pipelines de données, du contrôle de version et des pratiques CI/CD
• Expérience dans la conception de métriques, de jeux de données de test, de cadres d’évaluation ou d’expériences statistiques.

Langues: Français, Anglais

Raison d’exiger cette langue: pour échanger fréquemment avec nos fournisseurs ou partenaires parlant une autre langue que le français.

Compétences: Agilité d'apprentissage, Cybersécurité, Empathie, Gestion des risques, Grand modèle de langage, Initiative, Intelligence artificielle, Python, Résilience, Travail en équipe

Tes avantages

• Programme santé et bien-être incluant de nombreuses options
• Assurance collective flexible
• Régime de retraite généreux
• Régime d’acquisition d’actions
• Programme d’aide aux employé·e·s et à leur famille
• Services bancaires préférentiels
• Implication dans des initiatives communautaires
• Service de télémédecine
• Clinique virtuelle d’amélioration du sommeil

Nous proposons une offre évolutive à l’affût des tendances, de tes besoins et de ceux de tes proches.

Nos environnements de travail dynamiques et nos outils de collaboration modernes favorisent une expérience employé·e agréable. Nous accordons une grande place aux idées des membres de notre personnel. Que ce soit par nos sondages, ou encore par l’entremise de nos programmes, le dialogue en continu et la rétroaction sont encouragés.

L'audace d'agir dans un environnement humain

Nous sommes une banque à taille humaine qui se démarque par son audace, sa culture entrepreneuriale et sa passion pour les gens. Nous existons pour avoir un impact positif dans la vie des gens. Nos valeurs fondamentales de complicité, d’agilité et de pouvoir d’agir sont nos sources d’inspiration. L’inclusion est au cœur de nos engagements. Nous visons, autant que possible, à offrir un milieu de travail sans obstacle et accessible à l’ensemble des employé·e·s.

Nous souhaitons procurer, dans la mesure des moyens dont nous disposons, des mesures d’accessibilité lors du processus de recrutement. Si tu as besoin d'accommodement, n’hésite pas à nous en faire part lors de tes premiers échanges avec nous. Nous accueillons les candidates et candidats de tous horizons et nous aimerions savoir ce que tu peux ajouter à notre équipe.

Joins-toi à nous!