Удалённые тесты
Сравниваем модерируемые и немодерируемые форматы и разбираемся, когда применять каждый.
Удалённые тесты
Когда нужен модератор, а когда нет
Все исследования, о которых мы говорим дальше, проходят онлайн. Они бывают модерируемыми и немодерируемыми, а ещё — качественными или количественными. У каждого формата свои задачи и своё место в жизни продукта.
Что такое модерируемые исследования
В модерируемых исследованиях исследователь общается с респондентом напрямую — через видеозвонки или мессенджеры. Это всегда качественные методы, которые помогают глубже понять мотивации, контекст и барьеры пользователей.
К основным форматам относятся:
- Модерируемые юзабилити-тесты — проверяют, как пользователи справляются с задачами в прототипе или продукте.
- Глубинные интервью — подробно изучают опыт и восприятие.
- Фокус-группы — позволяют обсудить продукт или идею в небольшой группе.
- Дневниковые исследования — фиксируют опыт людей в течение нескольких дней или недель.
- Наблюдения — показывают реальное поведение в естественной среде.
Подробнее о модерируемых юзабилити-тестах
В модерируемых юзабилити-тестах исследователь встречается с каждым пользователем и ведёт сессию по гайду. Такой формат подходит, когда нужно не просто замерить прохождение сценария, а разобраться в мотивации, ожиданиях и барьерах.
Есть два подхода:
- Структурированное тестирование — у вас есть чёткие задания и порядок их выполнения. Такой формат удобен для сравнения участников и проверки всех гипотез, но требует заранее знать задачи пользователя и почти не оставляет места для неожиданных инсайтов.
- Неструктурированное тестирование — гайд примерный, исследователь отталкивается от действий и задач респондента. Это даёт гибкость и позволяет получить неожиданные инсайты, но результаты труднее сравнивать между собой и есть риск уйти от главной цели исследования.
Что такое немодерируемые исследования
Здесь респонденты выполняют задания сами: проходят сценарий, отвечают на вопросы, сравнивают интерфейсы.
Такой формат может быть и качественным, и количественным — всё зависит от цели.
Во время проведения исследования модератор не нужен, ему надо только проработать исследование на старте — верно сформулировать задания, чтобы получить данные, которые нужны.
Новый формат — AI-moderated
Здесь респондент тоже выполняет задания сам, но роль модератора берёт на себя AI.
Когда подойдут немодерируемые исследования
- Проверить понятность интерфейса: кнопки, иконки, текста.
- Сравнить несколько вариантов (баннеров, экранов, сообщений) с точки зрения привлекательности, понятности или других метрик и, например, отобрать варианты для A/B теста.
- Понять, насколько легко найти элемент: вход в личный кабинет, кнопку «Купить».
- Протестировать простой линейный сценарий: регистрацию, чек-аут в e-commerce.
- Проверить прототип перед релизом: найти проблемы, оптимизировать шаги.
- Проверить итоги юзабилити-тестов количественно, например, опросить больше людей, чтобы подтвердить гипотезу о том, почему название кнопки сбивает с толку.
- Проверить гипотезу количественно: опросить больше людей после юзабилити-теста.
- Сделать «чек» сайта или приложения: найти узкие места, барьеры конверсии.
- Проверить готовые тексты: маркетинговый копирайт, value proposition, e-mail.
Подойдут, если:
- нужно быстро собрать много ответов,
- важна разная аудитория при ограниченном бюджете,
- важно увидеть поведение в естественной среде без влияния модератора.
Когда лучше выбрать модерируемый формат
- Понять потребности, мотивы и барьеры, разобраться в прошлом опыте. В опросе можно спросить про опыт или перед началом немодерируемого теста попросить рассказать о своём опыте, но без живого диалога это будет поверхностно.
- Разобраться, почему возникает ошибка в интерфейсе. Немодерируемый тест покажет результат, но не объяснит глубоко причину. Интервью или модерируемый юзабилити-тест позволяют услышать ожидания и контекст действий.
- Длинные и сложные сценарии удобнее проверять модерируемо, особенно если есть разные ветки и нужно понять причины действий. Но если сценарий линейный или разбит на части, и респонденты не запутаются, или цель лишь замерить прохождение, подойдёт и немодерируемый формат.
- Работать с аудиторией, которая не привыкла к онлайн-инструментам. Если аудитория продукта не слишком «диджитал», немодерируемый формат может отпугнуть, а результаты окажутся неестественными.
- Обсуждать чувствительные темы. В личных или эмоционально тяжёлых вопросах людям комфортнее общаться с модератором. Например, в приложениях для психологического здоровья пользователи могут делиться личными переживаниями, и без живого контакта исследователя им будет сложнее чувствовать поддержку и безопасность.
В целом немодерируемые исследования не подходят для всех случаев, когда вам нужно поговорить с пользователем, для этого нужно проводить модерируемые исследования.