Задачи:
— Функциональное тестирование интентов, включая проверку корректности распознавания запросов, слотов и сущностей, а также неоднозначных формулировок и нестандартных сценариев.
— Проведение E2E-тестирования полного цикла взаимодействия пользователя с голосовым ассистентом от запроса до ответа.
— Тестирование интеграций с внешними сервисами ASR, TTS, LLM и другими.
— Автоматизация тестирования с разработкой сценарных автотестов на Go или Python, формирование регрессионного набора и интеграция в CI.
— Мониторинг качества продукта в продакшене, выявление деградаций и предотвращение регрессий.
— Ручное исследовательское тестирование сложных диалоговых сценариев, поиск ошибок NLU и проверка поведения ассистента в нестандартных ситуациях.
— Работа с требованиями совместно с аналитиками и продактами: формализация требований, определение критериев приёмки и выявление потенциальных проблем на этапе проектирования.
Требования:
— Опыт работы в QA не менее 5 лет.
— Знание принципов работы голосовых ассистентов, NLU, интентов, слотов и сущностей.
— Опыт тестирования систем с недетерминированными ответами.
— Сильный опыт E2E-тестирования распределённых систем.
— Понимание REST, gRPC, очередей и межсервисных взаимодействий.
— Практический опыт написания автотестов на Go или Python.
— Умение самостоятельно проектировать тестовые сценарии и выстраивать стратегию тестирования.
— Готовность работать с неполными требованиями, задавать вопросы и влиять на качество продукта.
— Высокая самостоятельность, инициативность и системное мышление.
Будет преимуществом:
— Опыт тестирования голосовых ассистентов и диалоговых систем.
— Опыт работы с Kibana, Grafana, Prometheus, Sentry.
— Понимание тестирования stateful-диалогов и управления контекстом.
— Знание Docker и Kubernetes.
— Опыт построения мониторинга качества внешних сервисов и автоматизации регрессионного тестирования.
Контакты работодателя доступны по кнопке «Откликнуться» после входа.
Сейчас в каталоге 745 вакансий по этому направлению, удалённо можно работать в 57%.
Зарплата в этой вакансии, 190 000 ₽ в месяц, на 5% ниже медианы по направлению (200 000 ₽). У половины вакансий от 160 000 ₽ до 280 000 ₽ (вакансий с вилкой: 246).
Навыки этой вакансии, которые чаще всего просят по направлению: Python (31%). В скобках доля вакансий направления.