AI Quality & Evaluation Engineer

HIBERUS POLAND SPÓŁKA Z OGRANICZONĄ ODPOWIEDZIALNOŚCIĄ; Wrocław; On-site; PLN 120,000 - 180,000; Full time

Benefits offered by this job

Prywatna opieka medyczna

Job summary

Hiberus Poland Sp. z o.o. poszukuje AI Testera / AI Evaluation Engineera do testowania i oceny jakości rozwiązań AI/ML/GenAI. Twoje zadania obejmą analizę wyników modeli, tworzenie scenariuszy testowych i raportowanie defektów.

Doświadczenie w testowaniu oprogramowania, znajomość ML/LLM oraz umiejętność pracy z SQL i API będą kluczowe. Oferujemy stabilne zatrudnienie i rozwój w międzynarodowym środowisku Hiberus.

Qualifications

• Minimum 3 lata doświadczenia w testowaniu oprogramowania lub systemów analitycznych.
• Praktyczna znajomość tworzenia przypadków testowych i raportowania defektów.
• Znajomość podstaw działania modeli ML/LLM oraz testowania systemów niedeterministycznych.
• Umiejętność projektowania zestawów testowych do oceny jakości odpowiedzi modeli, klasyfikacji i ekstrakcji informacji.
• Znajomość SQL, Postman oraz narzędzi do testowania API.
• Umiejętność oceny wyników modeli pod kątem trafności, kompletności, zgodności ze źródłem, bezpieczeństwa i użyteczności.

Responsibilities

• Przygotowywanie scenariuszy testowych dla rozwiązań AI, ML i GenAI.
• Projektowanie zestawów pytań, danych referencyjnych i przypadków brzegowych do oceny modeli.
• Testowanie jakości odpowiedzi modeli oraz stabilności zachowania systemów AI.
• Przeprowadzanie testów regresji po zmianie modelu, promptu, danych źródłowych lub konfiguracji.
• Raportowanie defektów, anomalii oraz ryzyk jakościowych.
• Współpraca z AI Engineerami, analitykami, zespołami biznesowymi i bezpieczeństwa.
• Dokumentowanie wyników testów oraz przygotowywanie rekomendacji dotyczących jakości systemów AI.

Skills

Testowanie oprogramowania

ML/LLM basics

Raportowanie defektów

SQL

Postman API

Testy regresji

Analiza danych

Tools

Postman

SQL client

Job description

Hiberus Poland Sp. z o.o. poszukuje AI Testera / AI Evaluation Engineera do testowania i oceny jakości rozwiązań AI/ML/GenAI. Twoje zadania obejmą analizę wyników modeli, tworzenie scenariuszy testowych i raportowanie defektów.

Doświadczenie w testowaniu oprogramowania, znajomość ML/LLM oraz umiejętność pracy z SQL i API będą kluczowe. Oferujemy stabilne zatrudnienie i rozwój w międzynarodowym środowisku Hiberus.