Senior AI QA & Automation Engineer

Cognizant; Montreal (administrative region); Hybrid; CAD 90,000 - 120,000; Full time

Job summary

Cognizant à Montréal recherche un Ingénieur Assurance Qualité expérimenté en IA, tests d'automatisation et performance. Vous utiliserez Python, Robot Framework et Playwright pour concevoir et exécuter des tests sur des systèmes et modèles IA.

Vous travaillerez sur les pipelines RAG, les bases vectorielles et les tests de biais, et participerez à l'intégration via MCP et tests de régression dans un cadre hybride avec 4 jours au bureau à Montréal.

Qualifications

• 7+ années d'expérience en assurance qualité ou ingénierie de la qualité.
• Solide connaissance des tests IA et des cadres d'automatisation.

Responsibilities

• Concevoir et exécuter des stratégies de test pour les systèmes et modèles IA.
• Développer une compréhension des LLM, embeddings et mécanismes d'attention.
• Concevoir des requêtes efficaces, détecter les hallucinations et les biais.
• Appliquer des métriques d'évaluation et seuils de performance IA.
• Tester les systèmes IA avec RAG et bases de données vectorielles.

Skills

QA engineering

AI testing

Automation testing

Python

Java

Selenium

Robot Framework

Playwright

Tools

Selenium

Robot Framework

Playwright

Job description

Cognizant à Montréal recherche un Ingénieur Assurance Qualité expérimenté en IA, tests d'automatisation et performance. Vous utiliserez Python, Robot Framework et Playwright pour concevoir et exécuter des tests sur des systèmes et modèles IA.

Vous travaillerez sur les pipelines RAG, les bases vectorielles et les tests de biais, et participerez à l'intégration via MCP et tests de régression dans un cadre hybride avec 4 jours au bureau à Montréal.