wud 2014 psychophysiological research in ux
TRANSCRIPT
MAIL.RU GROUP
ПСИХОФИЗИОЛОГИЧЕСКИЕ ИССЛЕДОВАНИЯ
Наталия Спрогис Ксения Стернина
НОВЫЙ ТРЕНД В UX RESEARCH
СТРЕМЛЕНИЕК ОБЪЕКТИВНОСТИСоциальная желательность ответов участников теста. Сложности с объяснением собственных действий и чувств.
САМОЕ СОКРОВЕННОЕВозможность «залезть в голову» пользователю. Лучше понять причины его поведения.
ВЫБОР МЕТРИК
КОЖНО-ГАЛЬВАНИЧЕСКАЯРЕАКЦИЯЭмоциональное реагирование (без полюса эмоции), возбуждение
ЭМГ (ЭЛЕКТРО-МИОГРАММА)Самый простой способ определить положительные и отрицательные эмоции
ЧСС (ЧАСТОТАСЕРДЕЧНОГО РИТМА)Эмоциональное реагирование, стресс
ЭЭГ (ЭЛЕКТРО-ЭНЦЕФАЛОГРАММА)Эмоции, ментальная нагрузка, вовлеченность
КАК ПРОХОДИТ ИССЛЕДОВАНИЕ
ЭМОЦИИ, ВОВЛЕЧЕННОСТЬ, УСТАЛОСТЬ
ВСЁ НЕ ТАК ПРОСТО
СБОР ДАННЫХ
МЕНЬШЕЕСТЕСТВЕННОСТИДатчики создают дискомфорт и усиливают «лабораторность» исследования.
УСТАНОВКА ДАТЧИКОВА теперь нужно грамотно установить датчики, чтобы получить хорошее качество записи
КГР
VS
Не можем крепить датчики на кончики пальцев
АЛЬТЕРНАТИВЫ?
МИОГРАММАМышц на лице очень много. В данном примере на человеке 8 датчиков миограммы. Мы обычно ограничиваемся 2мя.
©«Enhancement of Human Computer Interaction with facial Electromyographic sensors», Gibert, Pruzinec, Schultz, Stevens
МИОГРАММАНеобходимо изучить строение мышц лица, чтобы знать, куда крепить датчики
МИОГРАММАПросим респондентов хмуриться и улыбаться, чтобы поймать нужную мышцу
МИОГРАММАОтклеивающиеся электроды. Косметика? Нервы? Мимика?
ШУМЫ
VS
ДВИЖЕНИЯДаже небольшие движения респондента могут создавать шумы. Активная жестикуляция сильно портит данные.
МОДЕРАТОРРазговор с модератором также приводит к помехам. Реакцию на человека невозможно отделить от реакции на продукт.
ЭФФЕКТ МОДЕРАТОРА
ОСОБЕННОСТИ СЦЕНАРИЯМинимизируем общение респондента с модератором. Либо делаем так, чтобы система сама давала задания, либо даем их удаленно. Максимизируем самостоятельное выполнение задач. Просим «не махать руками».
СОСТОЯНИЕ ПОКОЯИзмеряем в начале теста. Соотносим с ним все реакции респондента, иначе можем не учесть общий профиль респондента.
ОБРАБОТКА РЕЗУЛЬТАТОВ
ЧИСТКА ШУМОВВручную очень трудоемко, пришлось создать собственное решение для самого простого сигнала
ЧИСТКА ШУМОВ
СЛОЖНЫЕСИГНАЛЫЧистка шумов и обработка гораздо сложнее. Нужны готовые решения.
РАЗНЫЕ ТИПЫ АНАЛИЗА• Событийный (на что была реакция и почему)
• Интервальный (сравнить куски геймплея между собой)
СЛОЖНОСТЬ ИНТЕГРАЦИИНеобходимо свести видео, ай-трекинг, метки событий и психофизиологические показатели. Нет хороших решений, позволяющих объединить и анализировать все в одном месте.
NOLDUS OBSERVER XT
РУЧНАЯ РАЗМЕТКА СОБЫТИЙ
-0.3
-0.1
0.1
0.3
0.5
0.7
0.9
02:34 03:34 04:34 05:34 06:34 07:34
Первый этаж, респондент 2
Пак1 Пак2 Пак3 Пак4 Пак5 пак 6
ИНТЕРВАЛЬНЫЙ АНАЛИЗПравильный выбор метода. Какое сочетание метрик использовать: количество пиков, их частоту, размах? (и это только для КГР)
ИНТЕРПРЕТАЦИЯ
РАЗНАЯ СИЛА РЕАКЦИИРеакция на один и тот же стимул у разных людей может отличаться значительно. Поэтому простое усреднение по всем людям не работает.
-0.6
-0.4
-0.2
0
0.2
0.4
0.6
0.8
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15
ПРОСМОТР ВИДЕОРОЛИКА (КГР)
Респондент 2 Респондент 7
-0.2
-0.15
-0.1
-0.05
0
0.05
0.1
0.15
0.2
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15
РЕСПОНДЕНТ 7 (КГР)
СЛОЖНО ОЦЕНИТЬ ПОЛЮС ЭМОЦИИСила реакции у разных людей разная и на графике это видно. А вот что это за эмоция, хотя бы положительная она или отрицательная, оценить уже намного сложнее.
КГР, дыхание, ЭКГ – показывают только наличие реакции.
РАСШИФРОВКА ЭМОЦИЙЭмоции можно пытаться считывать с лица. Сейчас активно развивается направление emotion reader с веб-камер, можете попробовать: labs.affectiva.com/superbowl/affdexweb.html
Мы для этого используем миограмму, это более точный метод, но мы пока не научились эти графики интерпретировать.
КАМЕННЫЕ ЛИЦАНи одна мышца не дрогнет на суровом лице солдата
ЭТАЛОННЫЕ ЭМОЦИИЭмоции расшифровать сложно. Пришла идея подобрать стимулы на базовые эмоции и выделить типичные реакции на эти эмоции. До анализа дело даже не дошло, оказалось, что подобрать универсальные стимулы – непосильная задача.
-0.5
0
0.5
1
1.5
2
0 1 2 3 4 5 6 7 8 9 10 11 12 13 14
КГР
-0.006
-0.004
-0.002
0
0.002
0.004
0.006
0.008
0.01
0 1 2 3 4 5 6 7 8 9 10 11 12 13 14
ЭМГ (щеки)
ОЖИДАНИЯ РЕАЛЬНОСТЬ
РЕАКЦИЯ НА СТИМУЛ VS НА ЧТО УГОДНОРеспондент может во время теста что-то вспомнить, у него может что-то зачесаться или заболеть
ОГРАНИЧЕНИЯ ПО ПРОДУКТАМИз-за того, что человек реагирует на всё подряд, невозможно отделить реакцию на интерфейс от реакции на контент.
УСИЛИЙ МАССА, ВКЛАД СОМНИТЕЛЬНЫЙПроводили сравнительное тестирование различных версий почты на iPad (большой веб vs тач-версия и приложение vs тач-версия). Все проблемы и мучения и так были видны в ходе теста.
ГРАФИКИ КОРРЕЛИРУЮТ
02:12
00:57
00:16
01:46
01:06
02:04 01:09 01:15
03:30
01:28
00:3701:32
01:54
02:30
00:46 00:5700:00
00:43
01:26
02:10
02:53
03:36
04:19
Переслать письмо двум адресатам
Найти письмо с темой "интернет-магазин"
Удалить два последних письма
Сделать фото и прислать его ответным
письмом
Найти письма за декабрь 2013
Создать письмо для четырех адресатов
Просмотреть все вложения
Открыть письмо на полный экран и
перейти к следующему
Время: Большой веб vs Тач-версия
Большой веб Тач-версия
2.02.5
4.7
4.0
4.2
5.55.14.9
4.3
3.0
3.32.9
4.4
3.03.2
4.1
0
1
2
3
4
5
6
Открыть письмо на полный экран и
перейти к следующему
Просмотреть все вложения
Создать письмо для четырех адресатов
Найти письма за декабрь 2013
Сделать фото и прислать его
ответным письмом
Удалить два последних письма
Найти письмо с темой "интернет-магазин"
Переслать письмо двум адресатам
Психофизиологические реакции: Большой веб vs Тач-версия
Тач-версия Веб-версия
НАШИ ПЛАНЫ
ОБЛАСТЬ ПРИМЕНЕНИЯ
ИГРЫ ВИДЕО
ПРОРАБОТКАМЕТОДААнализ более сложных метрик. Поиск решений по интеграции и обработке данных.
ВЫБОР ПОДХОДЯЩИХ ЗАДАЧ• Сравнение разных этапов/зон геймплея
• Поиск «ярких» моментов видео
• Удержание вовлеченности
• …
