Оборудование (как записывать, с какого устройства открывать)
Список заданий (описание, что человеку нужно делать)
Вводная инструкция
Вводное интервью
Задания
Итоговое интервью
Вопросы перед заданием (если они нужны)
Контекст
Формулировка задачи
Стартовый экран и условия
Нужные для задачи материалы (реквизиты, файлы и т. п.)
Инструкции для модератора (что делать, за чем наблюдать)
Критерии успешного завершения или остановки (Важно, потому что не всегда успех = успех)
Вопросы после задания (Всегда очень важно!!!)
Времени сильно меньше, чем вам кажется. Очень долгие сессии утомляют и негативно сказываются на результатах Примерный тайминг для каждой из частей:
Общая инструкция — 5 мин.
Вводное интервью — 5−10 мин.
Вопросы перед заданием — 1−2 мин.
Контекст и объяснение задачи — 1 мин.
Решение задачи — 3−5 мин.
Вопросы по задаче — 3 мин.
Итоговое обсуждение — 5−10 мин.
Длительность теста — 1 ч.
Дальше фокус теряется
Варианты количества заданий:
2−3 длинных
4−5 средней длины заданий
6−7 совсем коротких
Можно чередовать: Одни пользователи получают задания
1 и 3, другие 1 и 2
Последовательность должна иметь смысл для респондента
Для новых пользователей: самое начало взаимодействия
Если у заданий похожий способ выполнения, не ставьте их подряд и вообще убедитесь, что вам правда нужны похожие задания
ВОПРОСЫ И ИНСТРУКЦИИ Пояснения по каждому из этапов
Сообщите цель исследования (зачем вы позвали людей и что вы хотите — «мы сделали проект, но перед тем, как его разрабатывать мы хотим протестировать его на понятность и удобство с реальными людьми»)
Объясните, как будет проходить исследование, и скажите, что респондент может отказаться от участия в любое время (скажите, сколько времени займёт — можно немного приуменьшить, сколько задач нужно будет выполнить)
Сообщите респонденту, что вы оцениваете удобство приложения (а не их способность разобраться)
Не раскрывайте того факта, что вы принимали участие в проектировании приложения, даже если это так (чтобы людям не было неловко критиковать продукт)
Спросите разрешение на:
Проведение самого исследования (информированное согласие)
Заметки и видеозапись сессии тестирования
Спросите, есть ли у респондента вопросы прежде, чем начать тестирование
Должно быть коротким! Вы расспрашиваете про предыдущий опыт респондента:
Использование самого тестируемого продукта
Похожих продуктов
Решение той же задачи в широком смысле
Другой опыт в этой же сфере жизни
Используется, чтобы связать задания с контекстом конкретно этого респондента
Также чтобы при анализе находить связи между опытом и поведением, наблюдаемым на тесте
Иногда для проверки того, тех ли людей приглашаем
Поясняйте, откуда взялись данные
Но не давайте подсказок, которых не будет в реальном взаимодействии
Пример Допустим, задание: Вам пришёл штраф на 1000 рублей за превышение скорости. Оплатите его на сайте госуслуг. Лучше дать не просто номер извещения 123 456 789, а фото извещения, как в жизни
Укажите, с какого экрана и состояния начинать
Если есть личный кабинет и т. п., спроектируйте его содержание
Ошибки
Задания без начала
Старт как для опытного пользователя при тестировании новичков
Уточнить, есть ли у респондента опыт решения такой задачи в реальном мире
Актуализировать воспоминание об этой задаче, чтобы респондент вспомнил реальные требования и контекст
Субъективная оценка успешности, полноты результата (человек вообще понял, получилось ли у него?)
Общая оценка сложности
Обсуждение конкретных частей задания
Проверка своих наблюдений — была ли проблема?
Оценка понимания респондентом того, что произошло… И того, что произойдёт дальше! (Можно спросить респондента, понимает ли он, что будет после)
Вопросы про части интерфейса, которые встретились, но не использовались в задании
Одинаковые вопросы для всех заданий = плохой тест!
КАК ТЕБЕ КОНСПЕКТ?
Расскажи, чего не хватило. От похлавы мы тоже не откажемся))