(발제) beyond usability: evaluating emotional response as an integral part of the user experience...
TRANSCRIPT
유보미
Beyond Usability
: Evaluating Emotional Response as an Integral
Part of the User Experience
CHI 2009 : Case Study
New Usability Metrics and Methods
2011-10-13 l UX Lab l Bomi *
My story
과정이든, 결과든, 대체 어떻게 판단하고 평가하는 거지?
U X 가 잘 되 었 다 . UX적으로 디자인 되었다. UX가 영 형편없군 .
User Experience, UX methodology,
UX evaluation, Service design, User interface,
My Keywords
Usability, emotion, user experience, design,
user interface, metrics, methodology
Article Keywords
젊고, 파릇파릇한, 우리와 비슷한,
Authors
Anshu Agarwal
Andrew Meyer 심지어 05학번
Index
Introduction Measuring
Emotion
Method Analysis
& Results
Discussion
사용자들의 감정(emotion)을 무시 한 Usability Test 말고 다른 방법은 없을까?
Introduction
“인간으로써 우리가 하는 많은 것들은 우리의 감정으로 움직인다. … 반면 사람과 컴퓨터 사이의 인터랙션을 연구하는 HCI 분야에서 사람의 감정은 상대적으로 덜 연구되어왔다.”
感情
Introduction
感情 … respectable definition of the term ‘emotion’ is
notoriously difficult. 악명 높게
본 논문에서는 사용자들이 어떠한 대상(object)을 만났을 때 느끼는 감정적인 속성(emotional property)으로 감정을 정의한다.
Measuring Emotion
감정 연구 어려운 연구이다.
인간은 너무 복잡하다.
어려운 게 당연하다.
순간적으로 자주 감정이 변한다.
인간도 본인의 감정을 잘 알지 못한다.
Measuring Emotion
감정 연구 어려운 연구이다.
인간은 너무 복잡하다.
어려운 게 당연하다.
순간적으로 자주 감정이 변한다.
인간도 본인의 감정을 잘 알지 못한다.
그럼에도 불구하고, 감정을 파악하는 것은 서비스 디자인에서 반드시 필요한 요소다.
Measuring Emotion
그럼 사용자들의 감정을
어떻게 판단하여 평가할 것인가?
Verbal Measurement Tool
Nonverbal Measurement Tool
Measuring Emotion
Verbal Measurement Tool ; 언어로 감정을 나타내어 선택하게 하는
Standardized Emotional Profile PAD Semantic Differential Scale Feelings Toward Ad Scales
Leavitt Reaction Profile
Measuring Emotion
Nonverbal Measurement Tool ; 비언어적인 수단으로 감정을 나타내는
PrEmo Self Assessment Manikin Facial Action Coding System
Emocards
언어로 표현할 수 없는 ‘fuzziness’를 오히려 더 잘 표현해 줄 수 있다는 장점이 있음.
Method
Study Measure Development
상반되는 의미의 형용사 2개, 한 쌍(pair) 만족스러운 – 불만족스러운, 조용한-활발한 …
Task를 수행 한 뒤 정도를 표시하게 함.
PAD Semantic Differential Scale
Verbal Measurement Tool
Method
Study Measure Development
자신의 실험에 맞지 않는 형용사 쌍은 삭제, 필요한 형용사 쌍 제작.
* 기본적으로 기쁨, 자극(흥분), 우월로 나뉨.
Method
Study Measure Development nonverbal Measurement Tool
EmoCards
* 기본적으로
활기찬, 기쁜,
조용한, 평균의
라는 단어 조합으로
구성
Method
Study Procedure Study Procedure
두 버전의 Customer Relationship Management (CRM) 어플리케이션 인터페이스 제작
일반적인 task based Usability Test + 사용자들의 감정 조사 (Verbal, Nonverbal)
Method
Study Procedure Study Procedure
* 사용자들은 7개의 task 중 랜덤 하게 3개씩 task를 수행.
* 모든 실험은 사용자들의 자택에서 진행되었으며, 실험 이후 질적 분석을 위하여 인터뷰 실시.
* 매 Task를 수행할 때 마다, 감정 관련 실험이 진행
* 실험 참여자는 총 22명으로 13 male, 9 female.
Analysis and Results
Interface Comparison
No significant differences were found between interfaces using the usability measures collected in the study.
Analysis and Results
Interface Comparison 하지만…………
사용자들은 Interface A와 B의 Usability 차이가 별로 없음에도 불구하고, Interface A를 더 선호한다.
Analysis and Results
Interface Comparison Emocards에서도
A를 사용할 때 긍정적인 표정을 많이 선택하였다.
A B
Analysis and Results
Interface Comparison 사후 인터뷰에서도
질적인 데이터들을 통해 우리의 감정에 대한 연구는 보안되었다.
“ Interface B를 사용하고 있는데 갑자기 빨간색 팝업 창이 떠서 갑자기 너무
싫어졌다.
“뭘 하라는데 그게 어디에 있는 건지 헤맸다.
Discussion
이전의 Usability Test는
Number of Errors Time on task Heuristic evaluations Usability testing
에 초점이 맞추어져 있었다. (2009년)
Discussion
이전의 Usability Test는
Number of Errors Time on task Heuristic evaluations Usability testing
에 초점이 맞추어져 있었다. (2009년)
하지만 UX가 가미 된 (앞으로의) Usability Test는
Number of Errors Time on task Heuristic evaluations Usability testing
Emotional experience
까지 넓은 범위로 진행되어야 한다.
Discussion
이전의 Usability Test는
Number of Errors Time on task Heuristic evaluations Usability testing
에 초점이 맞추어져 있었다. (2009년)
하지만 UX가 가미 된 (앞으로의) Usability Test는
Number of Errors Time on task Heuristic evaluations Usability testing
Emotional experience
까지 넓은 범위로 진행되어야 한다.
논문을 읽고 난 뒤 유보미의 생각
감정을 연구한다는 것은 매우 어려운 일이지만, UX 연구를 하는데 있어 간과할 수 없는 뜨거운 감자.
좋았던 점
1. 기존 연구 방법을 답습하는 것이 아닌, 새로운 시각으로 연구 문제를 해결.
2. ‘감정’이라는 모호한 단어를 나름대로 정리하고 논문을 시작.
3. 실험의 내용을 다루는 논문이 아니라 전체적인 방법론을 다루는 논문.
간결하고 명확한 내용으로 논문을 작성함.
4. 감정이라는 보이지 않는 실체를 끌어내려고 다양한 선행연구와 조사를 덧붙임.
논문에 대한 신뢰도 증가.
의문스러웠던 점
1. Contextual Inquiry나 Think Aloud 같은 질적인 UX 방법론이 감정을 분석하기
위한 더욱 효과적인 방법이 아닐까?
Self-Report가 가지는 장점도 있지만, 한계도 있지 않을까?
Self-Report와 Observation이 결합되어야하지 않을까?
2. Usability Test가 반드시 감정연구를 포함해야 하는 것은 아니지 않나?
Usability Test의 목적에 따라 테스트 내용이 달라져야 할 것 같은데…
3. Method에 대한 설명이 부족하여 논문만 보고 이해하는데 어려움이 있었다.
Beyond Usability
: Evaluating Emotional Response as an Integral
Part of the User Experience
CHI 2009 : Case Study
New Usability Metrics and Methods
2011-10-13 l UX Lab l Bomi *
감사합니다 :)