AI Quality Assurance & Evaluation Engineer

Delen Private Bank; Antwerpen; On-site; EUR 70,000 - 110,000; Full time

Benefits offered by this job

Hospitalisatieverzekering

Tandzorgverzekering

Groepsverzekering

GSM-abonnement

Optionplan

Extra verlofdagen

Restaurant met verse maaltijden

Mobiliteitsbudget

Job summary

Delen Private Bank zoekt een QA & AI Evaluation Engineer voor het AIHub Platform. Je bewaakt kwaliteit, betrouwbaarheid en veiligheid van AI-toepassingen en definieert evaluatiecriteria, datasets en geautomatiseerde tests.

Je werkt samen met AI Engineers, developers en business analysts om processen en pipelines te verbeteren. Je voert adversarial testing uit, beheert regressietests bij model-upgrades en bewaakt monitoring en drift.

Qualifications

• Verstehen van QA voor AI/LLM toepassingen.
• Begrip van evaluatiecriteria en teststrategie.
• Ervaring met niet-deterministische systemen en drift.

Responsibilities

• Ontwikkelen en onderhouden van evaluation datasets en regels.
• Kalibreren van LLM-as-a-judge evaluaties.
• Uitvoeren functionele en non-functionele tests op API’s en integraties.
• Beheren van testcases en regressietests bij model-upgrades.
• Documenteren bevindingen en communiceren met stakeholders.

Skills

QA Engineer

Python

API testing

Azure DevOps

SQL / JSON

Tools

Postman

OpenAPI

LLM evaluation

Job description

Delen Private Bank zoekt een QA & AI Evaluation Engineer voor het AIHub Platform. Je bewaakt kwaliteit, betrouwbaarheid en veiligheid van AI-toepassingen en definieert evaluatiecriteria, datasets en geautomatiseerde tests.

Je werkt samen met AI Engineers, developers en business analysts om processen en pipelines te verbeteren. Je voert adversarial testing uit, beheert regressietests bij model-upgrades en bewaakt monitoring en drift.