AQA engineer (auto)

Интеграция Дистрибуция Проекты; United States; Remote; USD 120,000 - 170,000; Full time

Job summary

Интеграция Дистрибуция Проекты ищет единоличного владельца качества для проекта умного голосового ассистента. Вы будете тестировать интенты, слоты и контекст на распределённых системах, писать автотесты на Go или Python, а также настраивать регрессионное тестирование в CI/CD.

Ваша работа охватит E2E-диалоги и мониторинг продакшена. Требуется 5+ лет QA опыта в Senior роли, умение находить логические баги на стадии дизайна и настраивать метрики/логирование с Kibana, Grafana, Prometheus и Sentry.

Qualifications

• Имеет коммерческий опыт QA от 5 лет (Senior уровень).
• Разбирается в интентах, слотах, сущностях и умеет тестировать недетерминированные ответы.
• Опыт E2E-тестирования распределённых систем (REST, gRPC, очереди).
• Уверенно пишет автотесты на Go или Python.
• Умеет определять метрики и критерии приёмки.
• Плюсом будет опыт работы с голосовыми ассистентами и инструментами логирования/мониторинга.

Responsibilities

• Ведение полного E2E-тестирования диалогов от запроса до ответа.
• Подхватить существующие автотесты и писать новые сценарии на Go или Python для регресса интентов и интегрировать в CI.
• Писать инфраструктурные скрипты при необходимости.
• Функциональное тестирование интентов (формулировки, слоты, краевые случаи).
• Проведение полного E2E-тестирования диалогов и проверка стабильности внешних сервисов (ASR, TTS, LLM).
• Помогать аналитикам и продакт-менеджеру формализовать критерии приёмки интентов и E2E-сценариев.
• Внедрять мониторинг продакшена и участвовать в определении метрик.

Skills

Senior QA

E2E тестирование

Go/Python

REST/gRPC

CI/CD

Tools

Docker

Kubernetes

Kibana

Grafana

Prometheus

Sentry

Job description

Описание: Мы занимается разработкой умного голосового ассистента. Система маршрутизирует аудиопотоки во внешние сервисы распознавания и синтеза речи (ASR/TTS) и обрабатывает интенты с помощью LLM. Ищем единоличного владельца качества на проекте: от тест-дизайна до мониторинга продуктовой среды.

Задачи

• на начальном этапе задачи автоматизации займут около 30% времени (нагрузка плавающая)
• Необходимо подхватить существующие автотесты, писать новые сценарии на Go или Python для регресса интентов и интегрировать их в CI
• При необходимости — оперативно писать инфраструктурные скрипты
• функциональное тестирование интентов (формулировки, слоты, краевые случаи: прерывания, переспросы, неоднозначности)
• проведение полного E2E-тестирования диалогов от запроса до ответа
• проверка стабильности и отказоустойчивости внешних сервисов (ASR, TTS, LLM)
• ручная разведка сложных сценариев и поиск багов в логике NLU в условиях размытых задач
• помогать аналитику и продакт-менеджеру формализовать критерии приемки интентов и E2E-сценариев
• Внедрять мониторинг продакшена

Требования

• Имеет коммерческий опыт в QA от 5 лет (уровень Senior)
• Разбирается в интентах, слотах, сущностях и умеет проверять их на недетерминированных ответах
• Имеет сильный бэкграунд в E2E-тестировании распределенных систем (REST, gRPC, очереди)
• Уверенно пишет автотесты на Go или Python
• умеет находить логические баги еще на этапе дизайна
• самостоятельно определяет, какие метрики системы необходимо собирать
• Будет плюсом:
  • Опыт с голосовыми ассистентами будет преимуществом
  • Опыт работы с инструментами логирования и мониторинга: Kibana, Grafana, Prometheus, Sentry
  • Понимание специфики тестирования диалоговых контекстов (stateful-сценарии)
  • Знание Docker и Kubernetes для развертывания изолированных сред

Условия

• Полная занятость, официальное оформление
• Максимальная автономность: возможность самостоятельно выстроить процессы тестирования и автоматизации
• Сильная техническая команда и сложные задачи на стыке AI и Go-разработки