psychophysiological research in ux

1. ПСИХОФИЗИОЛОГИЧЕСКИЕ
ИССЛЕДОВАНИЯ
Наталия Спрогис MAIL.RU GROUP
Ксения Стернина

2. НОВЫЙ ТРЕНД В UX RESEARCH

3. СТРЕМЛЕНИЕ
К ОБЪЕКТИВНОСТИ
Социальная желательность
ответов участников теста.
Сложности с объяснением
собственных действий и чувств.

4. САМОЕ СОКРОВЕННОЕ
Возможность «залезть в голову»
пользователю. Лучше понять
причины его поведения.

5. ВЫБОР МЕТРИК

6. КОЖНО-
ГАЛЬВАНИЧЕСКАЯ
РЕАКЦИЯ
Эмоциональное реагирование
(без полюса эмоции),
возбуждение

7. ЭМГ (ЭЛЕКТРО-
МИОГРАММА)
Самый простой способ
определить положительные и
отрицательные эмоции

8. ЧСС (ЧАСТОТА
СЕРДЕЧНОГО РИТМА)
Эмоциональное реагирование,
стресс

9. ЭЭГ (ЭЛЕКТРО-
ЭНЦЕФАЛОГРАММА)
Эмоции, ментальная нагрузка,
вовлеченность

10. КАК ПРОХОДИТ ИССЛЕДОВАНИЕ

11. ЭМОЦИИ, ВОВЛЕЧЕННОСТЬ, УСТАЛОСТЬ

12. ВСЁ НЕ ТАК ПРОСТО

13. СБОР ДАННЫХ

14. МЕНЬШЕ
ЕСТЕСТВЕННОСТИ
Датчики создают дискомфорт
и усиливают «лабораторность»
исследования.

15. УСТАНОВКА ДАТЧИКОВ
А теперь нужно грамотно установить датчики, чтобы получить
хорошее качество записи

16. КГР
VS
Не можем крепить датчики на кончики пальцев

17. АЛЬТЕРНАТИВЫ?

18. МИОГРАММА
Мышц на лице очень
много. В данном примере
на человеке 8 датчиков
миограммы. Мы обычно
ограничиваемся 2мя.
©«Enhancement of Human Computer Interaction with facial Electromyographic sensors», Gibert, Pruzinec, Schultz, Stevens

19. МИОГРАММА
Необходимо изучить
строение мышц лица,
чтобы знать, куда крепить
датчики

20. МИОГРАММА
Просим респондентов
хмуриться и улыбаться,
чтобы поймать нужную
мышцу

21. МИОГРАММА
Отклеивающиеся
электроды. Косметика?
Нервы? Мимика?

22. ШУМЫ
VS

23. ДВИЖЕНИЯ
Даже небольшие движения
респондента могут
создавать шумы. Активная
жестикуляция сильно
портит данные.

24. МОДЕРАТОР
Разговор с модератором
также приводит к помехам.
Реакцию на человека
невозможно отделить от
реакции на продукт.

25. ЭФФЕКТ МОДЕРАТОРА

26. ОСОБЕННОСТИ СЦЕНАРИЯ
Минимизируем общение респондента с
модератором. Либо делаем так, чтобы система сама
давала задания, либо даем их удаленно.
Максимизируем самостоятельное выполнение задач.
Просим «не махать руками».

27. СОСТОЯНИЕ ПОКОЯ
Измеряем в начале теста.
Соотносим с ним все
реакции респондента,
иначе можем не учесть
общий профиль
респондента.

28. ОБРАБОТКА РЕЗУЛЬТАТОВ

29. ЧИСТКА ШУМОВ
Вручную очень трудоемко,
пришлось создать
собственное решение для
самого простого сигнала

30. ЧИСТКА ШУМОВ

31. СЛОЖНЫЕ
СИГНАЛЫ
Чистка шумов и обработка
гораздо сложнее. Нужны
готовые решения.

32. РАЗНЫЕ ТИПЫ АНАЛИЗА
• Событийный (на что была реакция и почему)
• Интервальный (сравнить куски геймплея между собой)

33. СЛОЖНОСТЬ ИНТЕГРАЦИИ
Необходимо свести видео, ай-трекинг, метки событий и
психофизиологические показатели. Нет хороших
решений, позволяющих объединить и анализировать все в
одном месте.

34. NOLDUS OBSERVER XT

35. РУЧНАЯ РАЗМЕТКА СОБЫТИЙ
0.9
0.7
0.5
0.3
0.1
-0.1
-0.3
Первый этаж, респондент 2
02:34 03:34 04:34 05:34 06:34 07:34
Пак1 Пак2 Пак3 Пак4 Пак5 пак 6

36. ИНТЕРВАЛЬНЫЙ АНАЛИЗ
Правильный выбор метода. Какое сочетание метрик
использовать: количество пиков, их частоту, размах? (и это
только для КГР)

38. ИНТЕРПРЕТАЦИЯ

39. РАЗНАЯ СИЛА РЕАКЦИИ
Реакция на один и тот же стимул у разных людей может
отличаться значительно. Поэтому простое усреднение по всем
людям не работает.

40. 0.8
0.6
0.4
0.2
0
-0.2
-0.4
-0.6
ПРОСМОТР ВИДЕОРОЛИКА (КГР)
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15
Респондент 2 Респондент 7

41. 0.2
0.15
0.1
0.05
0
-0.05
-0.1
-0.15
-0.2
РЕСПОНДЕНТ 7 (КГР)
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15

42. СЛОЖНО ОЦЕНИТЬ ПОЛЮС ЭМОЦИИ
Сила реакции у разных людей разная и на графике это видно.
А вот что это за эмоция, хотя бы положительная она или
отрицательная, оценить уже намного сложнее.
КГР, дыхание, ЭКГ – показывают только наличие реакции.

43. РАСШИФРОВКА ЭМОЦИЙ
Эмоции можно пытаться считывать с лица. Сейчас активно
развивается направление emotion reader с веб-камер, можете
попробовать: labs.affectiva.com/superbowl/affdexweb.html
Мы для этого используем миограмму, это более точный метод,
но мы пока не научились эти графики интерпретировать.

44. КАМЕННЫЕ ЛИЦА
Ни одна мышца не дрогнет на суровом лице солдата

45. ЭТАЛОННЫЕ ЭМОЦИИ
Эмоции расшифровать сложно. Пришла идея подобрать
стимулы на базовые эмоции и выделить типичные реакции на
эти эмоции. До анализа дело даже не дошло, оказалось, что
подобрать универсальные стимулы – непосильная задача.

47. 2
1.5
1
0.5
0
-0.5
КГР
0 1 2 3 4 5 6 7 8 9 10 11 12 13 14
0.01
0.008
0.006
0.004
0.002
0
-0.002
-0.004
-0.006
ЭМГ (щеки)
0 1 2 3 4 5 6 7 8 9 10 11 12 13 14

48. ОЖИДАНИЯ РЕАЛЬНОСТЬ

49. РЕАКЦИЯ НА СТИМУЛ VS НА ЧТО УГОДНО
Респондент может во время теста что-то вспомнить, у него может
что-то зачесаться или заболеть

50. ОГРАНИЧЕНИЯ ПО ПРОДУКТАМ
Из-за того, что человек реагирует на всё подряд, невозможно
отделить реакцию на интерфейс от реакции на контент.

51. УСИЛИЙ МАССА,
ВКЛАД СОМНИТЕЛЬНЫЙ
Проводили сравнительное тестирование различных версий
почты на iPad (большой веб vs тач-версия и приложение vs
тач-версия). Все проблемы и мучения и так были видны в
ходе теста.

52. ГРАФИКИ КОРРЕЛИРУЮТ
02:12
00:57
00:16
01:46
01:06
02:04 01:09 01:15
03:30
01:28
00:37
01:32
01:54
02:30
00:46 00:57
04:19
03:36
02:53
02:10
01:26
00:43
00:00
Переслать письмо двум
адресатам
Найти письмо с темой
"интернет-магазин"
Удалить два последних
письма
Сделать фото и
прислать его ответным
письмом
Найти письма за
декабрь 2013
Создать письмо для
четырех адресатов
Просмотреть все
вложения
Открыть письмо на
полный экран и
перейти к следующему
Время: Большой веб vs Тач-версия
Большой веб Тач-версия
2.5 2.0
4.7
4.0
4.2
5.5
4.9 5.1
4.3
3.0
3.3
2.9
4.4
3.2 3.0
4.1
6
5
4
3
2
1
0
Открыть письмо на
полный экран и
перейти к
следующему
Просмотреть все
вложения
Создать письмо для
четырех адресатов
Найти письма за
декабрь 2013
Сделать фото и
прислать его
ответным письмом
Удалить два
последних письма
Найти письмо с темой
"интернет-магазин"
Переслать письмо
двум адресатам
Психофизиологические реакции: Большой веб vs Тач-версия
Тач-версия Веб-версия

54. НАШИ ПЛАНЫ

55. ОБЛАСТЬ ПРИМЕНЕНИЯ
ИГРЫ ВИДЕО

56. ПРОРАБОТКА
МЕТОДА
Анализ более сложных
метрик. Поиск решений по
интеграции и обработке
данных.

57. ВЫБОР ПОДХОДЯЩИХ ЗАДАЧ
• Сравнение разных этапов/зон геймплея
• Поиск «ярких» моментов видео
• Удержание вовлеченности
• …

58. СПАСИБО!
Ксения Стернина
sternina@corp.mail.ru
Наталия Спрогис
n.sprogis@corp.mail.ru
MAIL.RU GROUP