Помощь модератора на юзабилити-тесте: что сохранить рядом с результатом задания
Участник дошёл до нужного экрана после слов модератора «Откройте фильтры справа». Если в отчёте осталось только «задание выполнено», важная часть наблюдения потеряна. Сохраните само вмешательство и поведение до него: команда должна понимать, какой результат был получен самостоятельно, а какой — при поддержке.
Не всякая реплика модератора одинаково влияет на результат
В модерируемой сессии исследователь помогает организовать разговор, но может незаметно подсказать действие. NN/g обращает внимание на риск наводящих формулировок и помощи, меняющей поведение. При разборе важно оценивать содержание вмешательства, а не просто отмечать, что модератор говорил.
Просьба повторить нерасслышанное задание отличается от указания кнопки. Исправление пропавшей демонстрации экрана отличается от объяснения, где искать функцию. Такие события не стоит объединять одной отметкой «помогли»: сначала сохраните наблюдаемое, затем объясните, что могло измениться.
В отчёте по юзабилити-тестированию помощь относится к условиям результата. Здесь разберём отдельную задачу перед сборкой отчёта: восстановить границу вмешательства, его содержание и последующее действие участника.
Разберите один эпизод до выставления итоговой отметки
Откройте протокол и формулировку задания
Найдите критерий завершения, правила подсказок и остановки. Сохраните версию прототипа и устройства. Если правила отсутствуют, отметьте этот пробел: не придумывайте задним числом удобный порог помощи, который улучшит итоговую таблицу.
Восстановите действия до вмешательства
Просмотрите экран и прослушайте речь. Запишите, что участник уже сделал, где остановился и о чём спросил. Не приписывайте ему незнание функции только по молчанию: возможно, он читал или проверял результат предыдущего действия.
Выпишите точные слова модератора
Укажите таймкод и короткий контекст. Отметьте, назван ли элемент интерфейса, предложен ли маршрут или раскрыт ли ожидаемый ответ. Если помощь была технической, опишите конкретное действие: например, восстановление звука связи, а не обобщённое «исследователь помог».
Сопоставьте ближайшее действие после
Проверьте, что действительно произошло на экране. Слова «теперь понятно» не доказывают завершение задания. Запишите новое действие, фактический результат и оставшиеся затруднения. После содержательной подсказки дальнейшее поведение рассматривайте с учётом полученного знания.
Сохраните описание и основание оценки
Примените согласованные правила протокола и оставьте ссылку на эпизод. Если оценка спорна, сохраните описание с помощью и вопрос для разбора командой. В сравнении с другой сессией укажите различие условий, вместо того чтобы объединять несопоставимые результаты одной цифрой.
Учебный пример: фильтр найден после указания места
Учебный пример: участнику нужно найти бесплатное занятие в каталоге. До 08:40 он просматривает карточки и не открывает фильтр. Модератор говорит: «Откройте фильтры справа». После этой реплики участник выбирает нужный признак и находит подходящую карточку.
Модератор: «Откройте фильтры справа». После реплики участник применил фильтр. Самостоятельное обнаружение фильтра в этом эпизоде не подтверждено; результат после подсказки сохранён отдельно.
В карточке эпизода остаются две части. До вмешательства фильтр самостоятельно не открыт. После указания места участник смог применить признак. Нельзя из этого эпизода сделать вывод, что он самостоятельно нашёл фильтр; при этом дальнейшие действия всё ещё могут дать полезные наблюдения.
Для проверки используйте речь вместе с экраном. Таймкод расшифровки помогает найти реплику, но не показывает клик. Если запись звука и экрана имеет разные временные шкалы, сначала сопоставьте их, а затем оформляйте границу вмешательства.
| Реплика или событие | Что зафиксировать | Что проверить отдельно |
|---|---|---|
| «Откройте фильтры справа» | Подсказка расположения действия | Как изменился путь участника |
| «Повторите, пожалуйста, задание» | Повтор формулировки | Не добавились ли новые указания |
| Восстановили демонстрацию экрана | Техническое вмешательство | Не прервалась ли сама задача |
| «Что вы ожидали увидеть?» | Вопрос исследователя | Не повлиял ли момент вопроса на действие |
Карточка вмешательства
Один эпизод — одна запись. Если помощь повторялась, сохраните последовательность, чтобы поздняя подсказка не скрыла раннюю.
Сессия и задание: Версия интерфейса, устройство: Правило оценки и остановки: Таймкод вмешательства: Действия и слова участника до: Точная реплика или действие модератора: Тип вмешательства и основание: Действия на экране после: Фактический результат: Оценка по протоколу: Ограничение сравнения: Что требует разбора:
Перед включением результата в отчёт
- Сохранена исходная формулировка задания.
- Реплика модератора приведена точно.
- Действия до и после проверены по экрану.
- Техническая помощь описана конкретно.
- Результат после подсказки не назван самостоятельным.
- Оценка связана с правилами исследования.
Разберём детали
Любой вопрос модератора делает результат непригодным?
Нет. Содержание и момент вопроса имеют значение. Восстановите, дал ли он информацию о решении или переключил внимание. Окончательную оценку связывайте с протоколом, а не с правилом «модератор заговорил — всё пропало».
Можно посчитать выполнение после подсказки вместе с самостоятельным?
Не объединяйте такие случаи без явного определения показателя. Если используете общую категорию, объясните, что в неё входит, и сохраните отдельный признак помощи. Для сравнения самостоятельного выполнения нужны соответствующие условия.
Достаточно расшифровки без экранного видео?
Она помогает восстановить слова и порядок реплик, но не доказывает конкретный клик или состояние интерфейса. При отсутствии экрана обозначьте пробел и не дополняйте действия по памяти как наблюдаемые факты.