2. Цели тестирования:
Каково качество интерфейса?
Что нужно исправить в интерфейсе
продукта и как именно это сделать?
Насколько интерфейс продукта
лучше или хуже, чем у конкурентов?
Получить достаточную аргументацию для
принятия решения о судьбе продукта
Понять
3. Что это?
ЮТ - это эксперимент, в ходе которого
типичные пользователи, находятся в
типичном или приближенном к таковому
контексте, выполняют типичные действия
в изучаемом сервисе.
4. Что это?
Модератор, присутствующий на тесте
(или наблюдающий за ходом
тестирования), фиксирует проблемы, с
которыми сталкиваются пользователи, а
так же фиксирует некоторые метрики,
которые могут быть значимы в оценке
интерфейса
5. Метрики
Успешность выполнения сценария
(задачи),
Время выполнения сценария (задачи),
Количество проблем
Устойчивость проблем (~обучаемость),
Частота проблем,
Критичность проблем,
Субъективная оценка удовлетворенности
выполнением задания (до и после)
10. Преимущества
Высокое качество оценки, глубокое
изучение взаимодействия
Вариативность метода, пригоден для
большинства проектов
В том числе удаленно!
Результаты тестирования очевидны,
понятны, осязаемы
11. Недостатки
Сложности с рекрутом
Не совсем достоверный контекст
использования
«Статистическим» данным тестирований
нельзя доверять
Затратно
Требуются навыки модерирования
17. Формат ведения теста
Методик много, можно выделить:
Think Aloud
Sit-by или пассивное наблюдение
Retrospective Review
Можно использовать все эти методики в одном
тесте в зависимости от контекста задач
24. Подготовка: дизайн теста
Задания
Формулируем от потребности, не от функционала
Отсутствие подсказок
Полнота, информативность, однозначность
Критерии успешности: объективные,
субъективные
30. Подготовка: Пилот
Проверить:
задания на «поток»,
формулировки заданий на корректность
тестовую работоспособность системы
длительность заданий (заложить время на
проблемы, на прерывания)
31. Тестирование
Что нужно сделать до тестов:
Задания (критерии выполнения)
Материалы
Сетап
Вознаграждения
Логгер
Лаборатория и рекреационная зона
32. Тестирование
Что делать во время тестов
Модерирование:
Слушать, смотреть,
Задавать вопросы, понимать «почему?»
Направлять,
Фиксировать
35. Тестирование
Между сессиями:
«Откатить» до стартового состояния,
почистить куки и прочее
Проанализировать выявленные
проблемы, быстро систематизировать их
Обсудить с проектной группой
Скорректировать тест (на первых
сессиях)
42. Анализ и отчетность
Отчет
Общая информация о продукте
Информация о проекте (исполнители, даты)
Описание методики
Цели проведения исследования
Краткое резюме (статистика)
Общие выводы (рекомендации)