QA engineer (auto)

Meteoro Platform; United States; Remote; USD 100,000 - 180,000; Full time

Benefits offered by this job

25 дней отпуска

Доп. выходные и больничные

Удалённая работа

Ежегодные корпоративные выезды

Job summary

Компания Meteoro Platform ищет инженера по QA Automation для разработки и внедрения современных стратегий тестирования и инфраструктуры качества. Работа предполагает работу с AI-решениями и распределёнными системами, фокус на CI/CD и обеспечение стабильности в продакшене, включая AI-компоненты.

Кандидат будет проектировать тестовые фреймворки, выстраивать архитектуру тестирования для AI- и backend-систем, интегрировать тестирование в пайплайны и работать над недетерминированным поведением

Qualifications

• 2+ года опыта в QA Automation/SDET или Software Engineer.
• Опыт построения и поддержки автоматизированных тестовых фреймворков.
• Опыт тестирования API, интеграционного и E2E тестирования.
• Понимание quality gates и автоматизации проверок в пайплайнах.
• Опыт работы с логами, метриками и observability-инструментами (Grafana, ELK и аналоги).
• Опыт работы с Test Management Systems (Zephyr).
• Понимание клиент-серверной архитектуры: HTTP, cookies и сессии.

Responsibilities

• Проектировать, разрабатывать и поддерживать масштабируемые тестовые фреймворки с нуля.
• Выстраивать архитектуру тестирования для AI-оркестрированных и backend-систем.
• Интегрировать автоматизированное тестирование и quality gates в CI/CD-пайплайны.
• Разрабатывать стратегии тестирования для AI/GenAI-систем, включая сценарии для недетерминированного поведения моделей.
• Проектировать verification loops и evaluation pipelines для проверки качества системы.
• Участвовать в формировании тестовой стратегии на ранних этапах разработки (Shift-Left).
• Использовать observability-инструменты для диагностики production-инцидентов (Shift-Right).
• Анализировать сложные системные дефекты и проводить root cause analysis.
• Взаимодействовать с командами разработки, DevOps и Product Management.

Skills

QA Automation

API testing

E2E testing

CI/CD

Python

Playwright

Observability

Jira

Grafana

ELK

Tools

Playwright

Python

PostgreSQL

Redis

Kafka

WebSocket

Docker

Kubernetes

Sentry

GitLab CI

GitHub Actions

Jenkins

Grafana

ELK

Job description

Описание:

На один из наших международных продуктов мы ищем QA Automation Engineer, который поможет проектировать, строить и внедрять современные стратегии тестирования и quality-инфраструктуру. Мы работаем с AI-решениями и генеративными моделями, а также с распределенными системами и сложными автоматизированными сценариями. Основной фокус роли - инженерия качества, автоматизация тестирования, CI/CD и обеспечение стабильности системы в продакшене, включая AI-компоненты.

Задачи:

• Проектировать, разрабатывать и поддерживать масштабируемые тестовые фреймворки с нуля.
• Выстраивать архитектуру тестирования для AI-оркестрированных и backend-систем.
• Интегрировать автоматизированное тестирование и quality gates в CI/CD-пайплайны для обеспечения стабильной поставки.
• Разрабатывать стратегии тестирования для AI/GenAI-систем, включая сценарии для недетерминированного поведения моделей.
• Проектировать verification loops и evaluation pipelines для проверки качества системы и соответствия поведения требованиям.
• Участвовать в проработке требований и формировании тестовой стратегии на ранних этапах разработки (Shift-Left).
• Использовать инструменты observability (логи, метрики, трассировки) для диагностики и анализа production-инцидентов (Shift-Right).
• Анализировать сложные системные дефекты, проводить root cause analysis, отслеживать цепочки отказов через логи и метрики.
• Взаимодействовать с командами разработки, DevOps и Product Management для повышения качества продукта.

Требования:

• Опыт работы в QA Automation, SDET или Software Engineer от 2+ лет.
• Опыт построения и поддержки автоматизированных тестовых фреймворков.
• Опыт тестирования API, интеграционного и E2E тестирования.
• Понимание принципов quality gates и автоматизации проверок в пайплайнах.
• Опыт работы с логами, метриками и observability-инструментами (Grafana, ELK и аналоги).
• Опыт работы с Test Management Systems (Zephyr).
• Понимание клиент-серверной архитектуры: HTTP, cookies и сессии, авторизация, асинхронная обработка через очереди.
• Умение локализовать дефект до слоя: фронт, API, воркер или БД.
• Опыт кросс-браузерного и мобильного веб-тестирования, включая Safari/WebKit.
• Способность самостоятельно принимать инженерные решения и нести ответственность за качество системы.
• Английский язык - на уровне чтения технической документации.
• Будет плюсом: Опыт тестирования LLM, AI-агентов или других AI/GenAI систем.
• Будет плюсом: Понимание особенностей тестирования недетерминированных систем.
• Будет плюсом: Опыт построения evaluation frameworks для AI-приложений.
• Будет плюсом: Опыт работы с prompt evaluation и AI quality assessment подходами.
• Будет плюсом: Знакомство с RAG-пайплайнами, vector databases и AI orchestration frameworks (LangChain и аналоги).
• Будет плюсом: Опыт нагрузочного тестирования.
• Будет плюсом: Опыт использования security scanning инструментов.
• Будет плюсом: Бэкграунд в backend-разработке или SDET-роль.
• Будет плюсом: Опыт работы с CI/CD (GitLab CI, GitHub Actions, Jenkins или аналогичные системы).
• Будет плюсом: Опыт работы с Python, Playwright, PostgreSQL, Redis, Kafka, WebSocket, Docker, Kubernetes, Sentry, Jira.

Условия:

• Работа в динамичной и инновационной среде AI-технологий.
• Конкурентоспособный пакет заработной платы.
• 25 дней отпуска, дополнительные выходные и больничные.
• Удаленный формат работы.
• Ежегодные корпоративные выезды за счёт компании.
• Возможности для профессионального и карьерного роста.
• Работа в команде, где можно влиять на технические решения и развитие перспективного продукта.