Test Analyst – AI Solutions

TQLO SP. Z O.O.; United States; Remote; USD 20,000 - 28,000; Full time

Benefits offered by this job

Współpraca B2B 100% zdalnie

Duża samodzielność projektowa

Praca przy projektach AI/GenAI w farm;

Job summary

TQLO SP. Z O.O. w Polsce poszukuje Test Analysty specjalizującego się w testowaniu rozwiązań AI/LLM. Praca w 100% zdalna, z możliwością współpracy z zespołem z Warszawy w celu zapewnienia kompleksowego testowania od planowania po analizę wyników.

Wymagane jest praktyczne doświadczenie w testowaniu, samodzielność i umiejętność pracy nad strategiami testowania, scenariuszami i identyfikacją ryzyk. Dołącz do zespołu pracującego nad nowoczesnymi technologiami AI.

Qualifications

• Praktyczne doświadczenie w roli Test Analyst lub pokrewnej, obejmujące samodzielne projektowanie testów, analizę wymagań i odpowiedzialność za realizację procesu testowego.

Responsibilities

• Projektowanie, planowanie i realizację całego procesu testowania AI, w tym opracowywanie strategii testów, zakresu, priorytetów, harmonogramu i kryteriów akceptacji.
• Analizowanie wymagań biznesowych i technicznych, identyfikowanie zależności i przekładanie ich na scenariusze testowe.
• Projektowanie i wykonywanie testów funkcjonalnych, integracyjnych, regresyjnych i end-to-end, uwzględniając przypadki brzegowe i ryzyka związane z AI/LLM.
• Weryfikacja poprawności działania narzędzia AI, jakości odpowiedzi i zgodności z danymi źródłowymi.
• Współpraca z architektami, zespołem technicznym i Project Managerem w doprecyzowywaniu wymagań i przekazywaniu informacji.
• Dokumentowanie wyników testów, analizowanie defektów i rekomendowanie działań jakościowych.

Skills

Projektowanie testów

Analiza wymagań

Testy end-to-end

AI/LLM

Współpraca

Tools

Testowanie API

JSON

YAML

HTTP

Job description

TRYB WSPÓŁPRACY

Tryb Współpracy: 100% zdalnie (kandydaci z Warszawy mile widziani)

Dostępność: Poszukujemy osób dostępnych od zaraz lub 14 dni

CZYM BĘDZIESZ SIĘ ZAJMOWAĆ?

• Samodzielnym projektowaniem, planowaniem i realizacją całego procesu testowania rozwiązania opartego na AI, w tym opracowywaniem strategii testów, określaniem ich zakresu, priorytetów, harmonogramu oraz kryteriów akceptacji.

• Analizowaniem wymagań biznesowych i technicznych, identyfikowaniem zależności pomiędzy komponentami systemu oraz przekładaniem wymagań na konkretne scenariusze i przypadki testowe.

• Projektowaniem i wykonywaniem testów funkcjonalnych, integracyjnych, regresyjnych i end-to-end, z uwzględnieniem przypadków brzegowych, potencjalnych ryzyk oraz specyfiki działania narzędzi AI/LLM (Large Language Models).

• Weryfikowaniem poprawności działania narzędzia AI, w szczególności jakości generowanych odpowiedzi, poprawności wyszukiwania informacji oraz zgodności wyników z danymi źródłowymi.

• Współpracą z architektami, zespołem technicznym i Project Managerem w zakresie doprecyzowywania wymagań, analizowania problemów oraz zapewniania sprawnego przepływu informacji pomiędzy obszarami projektu.

• Dokumentowaniem wyników testów, analizowaniem defektów, identyfikowaniem ryzyk oraz rekomendowaniem działań poprawiających jakość rozwiązania.

CZEGO OD CIEBIE OCZEKUJEMY?

• Praktycznego doświadczenia w roli Test Analyst lub pokrewnej, obejmującego samodzielne projektowanie testów, analizę wymagań oraz odpowiedzialność za realizację procesu testowego.

• Doświadczenia w opracowywaniu strategii i planów testowania, definiowaniu scenariuszy testowych, ustalaniu priorytetów oraz identyfikowaniu ryzyk i zależności projektowych.

• Bardzo dobrych umiejętności analitycznych, pozwalających samodzielnie analizować wymagania biznesowe i techniczne, identyfikować niejasności oraz przekładać je na konkretne przypadki testowe.

• Praktycznej znajomości narzędzi AI oraz rozumienia działania modeli LLM, ich możliwości, ograniczeń i potencjalnych błędów, w tym nieprawidłowych lub niezgodnych z danymi odpowiedzi.

• Doświadczenia w samodzielnym wykonywaniu testów, analizowaniu defektów, dokumentowaniu wyników oraz ocenie jakości i gotowości rozwiązania do wdrożenia.

• Samodzielności, proaktywności i umiejętności współpracy z osobami odpowiedzialnymi za różne obszary techniczne i biznesowe projektu.

Nice to have:

• Doświadczenie w testowaniu rozwiązań AI/GenAI (Generative Artificial Intelligence), w szczególności weryfikacji odpowiedzi modeli językowych, jakości danych i zachowania agentów AI.

• Znajomość testowania API (Application Programming Interface), integracji systemowych oraz przepływów danych.

• Podstawowa znajomość MCP (Model Context Protocol), usług AWS (Amazon Web Services) oraz mechanizmów uwierzytelniania i autoryzacji, takich jak OAuth 2.0, OIDC (OpenID Connect) i SSO (Single Sign-On).

• Znajomość formatów JSON (JavaScript Object Notation), YAML (YAML Ain't Markup Language) oraz podstaw protokołu HTTP (Hypertext Transfer Protocol).

DLACZEGO WARTO?

• Współpraca w modelu B2B z możliwością świadczenia usług w 100% zdalnie.

• Duża samodzielność w projektowaniu i realizacji testów oraz realny wpływ na jakość i sposób weryfikacji rozwijanego rozwiązania.

• Udział w projekcie wykorzystującym AI w branży farmaceutycznej, łączącym analizę biznesową z praktycznym testowaniem nowoczesnych technologii.

• Możliwość współpracy z doświadczonymi architektami, zespołem technicznym oraz Project Managerem przy rozwiązywaniu złożonych zagadnień projektowych.

• Przestrzeń do proponowania własnych rozwiązań, rozwijania kompetencji analitycznych i pogłębiania wiedzy z obszaru AI.

Dziękujemy za wszystkie zgłoszenia! Skontaktujemy się z wybranymi osobami.