2010.09 badania użyteczności online

65
UseLab Sp. z o.o. Badania użyteczności online

Upload: arbointeractive-polska

Post on 17-May-2015

1.424 views

Category:

Documents


0 download

DESCRIPTION

2010.09.23 Użyteczn@stronaBadania użyteczności online

TRANSCRIPT

Page 1: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Badania użyteczności online

Page 2: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Trendy w badaniach użyteczności

Badacze to też ludzie – lubią mied wszystko online

Badanie zdalne/badania online zdobywają coraz większą popularnośd

Ale nie tylko o wygodę badaczy tu chodzi…

Wszelkie metody badao zdalnych oraz badao online stosowane są coraz częściej jako metody, które:

W naturalnym środowisku użytkownika

Pozwalają relatywnie szybko i tanio

Przebadad dużą grupę osób

I zebrad dane zarówno o charakterze ilościowym jak i jakościowym

Page 3: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

NA POCZĄTKU OKREŚLAMY CEL

Page 4: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Ale po co badad?

Łatwiejszy w użyciu

Popularniejszy

Page 5: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Ale po co badad?

Bardziej cool

Skuteczniejszy

Page 6: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

POTEM DOBIERAMY METODĘ

Page 7: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Metody Testujemy na użytkownikach, czy Twoje rozwiązania są przyjazne.

Audyt ekspercki Badania usability on-line Badania usability

Analiza statystyk

Clicktracking

Eyetracking Badania formularzy Wywiady IDI Card sorting

Page 8: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

POTRZEBUJEMY FEEDBACKU OD UŻYTKOWNIKÓW

Page 9: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Po co badad z udziałem użytkowników?

Page 10: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Skupimy się na obserwacji użytkownika

Badania zdalne Badania online Testy w laboratorium

Badany pozostaje w naturalnym

środowisku (własny komputer), ale jest w kontakcie z badaczem

Badany wykonuje zadania przy własnym komputerze i nie ma kontaktu z badaczem

Badany zapraszany jest do laboratorium i

bierze udział w badaniu

prowadzonym przez moderatora

Page 11: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

OBSERWACJA UŻYTKOWNIKA ONLINE

Page 12: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Obserwacja użytkownika online

Główne cechy metody:

To metoda badao użyteczności, w której badany wykonuje zadania w naturalnym

środowisku przy własnym komputerze.

Na wybranych stronach serwisu wyświetlane jest zaproszenie do badania. Osoby

wyrażają zgodę na wzięcie w nim udziału i realizują zadania w ramach określonej

procedury badawczej.

Badanie jest niemoderowane – respondenci samodzielnie przechodzą je zgodnie z

instrukcjami, które pojawiają się na ekranie.

Procedura zazwyczaj polega na wykonaniu pewnej liczby krótkich zadao w obrębie

serwisu i udzieleniu odpowiedzi na kilka pytao kwestionariuszowych.

Metoda pozwala na szybkie i efektywne kosztowo badania etnograficzne stron www,

przeprowadzane na dużych próbach. Dostarcza ilościowych i jakościowych danych

będących podstawą do decyzji dotyczących zmian w systemie.

Page 13: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Obserwacja użytkownika online

Zalety:

są szybkie i względnie tanie (biorąc pod uwagę liczbę przebadanych użytkowników),

dają możliwośd przebadania dużej grupy osób,

dostarczają zarówno ilościowych jak i jakościowych danych na temat serwisu,

odbywają się w naturalnym środowisku, przy wykorzystaniu komputera osobistego

należącego do osoby badanej,

pozwalają na ilościowy pomiar niemal wszystkich interakcji z systemem.

Page 14: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Obserwacja użytkownika online

Wady:

nie dają możliwości wejścia w interakcję z użytkownikiem, obserwowania jego reakcji

emocjonalnych, zadawania pytao pogłębiających temat,

skłaniają klientów do koncentracji na danych ilościowych,

dają mniejszą elastycznośd w tworzeniu różnych typów zadao dostosowanych do kontekstu

danego użytkownika,

wymagają od badacza dostosowania się do ograniczeo wybranego softu (każdy z

dostępnych programów posiada nieco inny zakres funkcjonalności).

Page 15: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Nie kupujemy nic w ciemno!

Dlatego lubimy badad użytecznośd aplikacji do badania

użyteczności

Bo badacz to też człowiek i lubi mied wygodnie!

A przy okazji osiąga wtedy lepsze wyniki.

Page 16: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Z jakich aplikacji korzystaliśmy?

Loop11

Usabilla

Webnographer

Userzoom

ClickTale

Page 17: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Jak oceniamy te doświadczenia?

Każda z nich oferuje teoretycznie dośd szerokie możliwości projektowania różnych typów zadao, zadawania różnych rodzajów pytao kwestionariuszowych, rejestrowania podstawowych mierników interakcji użytkownika z serwisem.

W rzeczywistości żaden z programów nie jest idealny, a przeprowadzenie kilku badao doprowadza nas do ważnych wniosków:

Badania użyteczności online dają inne możliwości, służą innym celom i nie zastąpią laboratoryjnych badao użyteczności.

Zależnie od zakładanego celu badao dobór optymalnego narzędzia będzie różny.

Page 18: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Często pojawiające się trudności

trudności związane z brakiem możliwości przetłumaczenia wszystkich przycisków i instrukcji, które widoczne są dla badanych (np. anglojęzyczne przyciski „Next”, „Done”),

brak obsługi starszych przeglądarek np. IE6,

brak możliwości filtrowania i grupowania badanych oraz personalizacji treści zadao według podanych przez użytkowników cech demograficznych,

brak wygodnych sposobów eksportu danych do formatów takich jak csv, xls, jpg,

brak dostępu do nagrao przedstawiających interakcję użytkownika z systemem,

koniecznośd wskazania tylko jednej podstrony sukcesu dla każdego zadania,

brak możliwości wskazania „obszaru sukcesu” (np. zadanie zakooczone jest sukcesem jeśli kliknięcie nastąpiło na określonym obszarze strony),

Badanie online teoretycznie łatwo jest zrobić samemu, ale uwaga!

Page 19: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Często pojawiające się trudności c.d.

możliwośd budowania tylko jednego typu badania w obrębie jednego softu (np. tylko test niemoderowany, albo tylko test jednego kliknięcia),

różne w przypadku różnych aplikacji, ale często zbyt ograniczone, możliwości zadawania kilku rodzajów pytao kwestionariuszowych,

brak możliwości automatycznego zakooczenia zadania np. w momencie, gdy nastąpiło kliknięcie na określony odnośnik,

brak możliwości zmiany zdefiniowanych ścieżek sukcesu i porażek w trakcie trwania badania co spowoduje ponowne przeliczenie danych,

brak możliwości odfiltrowania określonych użytkowników (np. po adresie IP) i ponownego przeliczenia statystyk,

trudności związane z obsługą urządzeo mobile,

brak możliwości edycji projektu badania po jego aktywacji.

Staranny dobór aplikacji pozwali skrócić czas wykonania badania i obniżyć koszty.

Page 20: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Czego nas to nauczyło?

Metody zdalne/online nie są remedium na całe zło

Rzadko są w pełni samodzielne – lubią występowad w zestawie z innymi metodami

Świetnie się sprawdzają jeśli dobrze umiejscowi się je w procesie badao i projektowania serwisu

Page 21: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Proces kiedyś i dziś

Pisanie/Testowanie Sprzedaż

Programiści

Page 22: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Proces

Badacz ma teraz w procesie coraz więcej miejsca dla siebie

Ważne, żeby się nie zgubił

Badacz użyteczności Użyteczne wnioski z badań

Page 23: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Jak umiejscowid metodę w procesie?

Na etapie wdrożeniaNa etapie badania

prototypów

Jako weryfikacja wyników

Page 24: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Np.

Tradycyjne badania w laboratorium pozwoliły nam zidentyfikowad jakie jest zachowanie

użytkowników w serwisie

Za pomocą metod online sprawdzamy czy wnioski potwierdzają się na szerszej populacji

użytkowników, upewniamy się, że jest to zachowanie użytkowników a nie indywidualne

cechy badanych, sprawdzamy które błędy powtarzają się najczęściej

Upewniwszy się wprowadzamy konkretne zmiany w serwisie

Po wprowadzeniu zmian wracamy do badania online pozwalają nam na śledzenie

trendów, analizę zmiany, sprawdzamy czy zmiany zadziałały tak jak chcieliśmy

Cały czas wspieramy się innymi metodami np. analizą statystyk – Google Analytics itp

Jak umiejscowid metodę w procesie?

Page 25: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Proces? (teoretycznie ok ;) )

Badany serwis

Przeprowadzenie badao

Analiza wyników

Raport i prezentacja wyników

Wzrost konwersji i satysfakcji użytkowników

Współpraca z klientem na wszystkich etapach projektu

Page 26: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Ale jak to wygląda od środka?

Badany serwis

Przeprowadzenie badao

Analiza wyników

Raport i prezentacja wyników

Wzrost konwersji i satysfakcji użytkowników

Oglądamy go bardzo dokładnie

Najpierw pilotaż!

Czy metoda pasuje do etapu

życia produktu?

Czy zebraliśmy wystarczającą ilość danych?,

Dobrej jakości?

Kto jest odbiorcą?

Weryfikacja

Page 27: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Przebieg badania online

Analiza wstępna serwisu – wykrycie podstawowych problemów użyteczności

Ułożenie procedury badania – we współpracy z Klientem układamy typowe scenariusze użycia

Analiza wyników – identyfikacja problemów oraz miejsc, które utrudniały badanym ukooczenie zadao

Raport zawierający rekomendacje poprawy serwisu

Zaproszenie uczestników badania - uczestnicy rozpoczynają badanie klikając w wygenerowany link bądź widoczny na stronie popup

Implementacja badania - generujemy osobny link do procedury badania bądź implementujemy kod wyświetlający na stronie popup

Page 28: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Co mierzymy?

Czas wykonania zadao

Odsetek zadao zakooczonych sukcesem

Analiza kliknięd

Analiza ścieżek eksploracji serwisu

Jakościowy feedback od użytkownika

Analiza satysfakcji korzystania z serwisu

Na tej podstawie przygotowywany jest raport dot. oceny użyteczności serwisu wraz z

rekomendacjami zmian zawierający:

Opis zachowao użytkowników w badanych

Listę błędów użyteczności, z dokładnym opisem (tekstowym i graficznym),

Rekomendacje poprawy błędów i modyfikacji serwisu/prototypu

Podsumowanie wyników

Prezentacja wyników odbywa się w formie warsztatów projektowych w siedzibie klienta.

Page 29: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Jak i kogo badamy?

Badani rekrutowani są po wejściu na badany serwis: poprzez banner linkujący do

procedury badania bądź popup wyświetlający się na stronie głównej serwisu lub

link do badania rozsyłany w korespondencji.

Aby zdobyd wiarygodne dane ilościowe badamy grupę od 50 do 100

użytkowników.

Każda z badanych osób wykonuje na stronie 4-5 krótkich scenariuszy.

W trakcie badania użytkownicy mają możliwośd skomentowania poszczególnych

zadao.

Po wykonaniu scenariuszy każdy z badanych proszony jest o wypełnienie

krótkiego kwestionariusza satysfakcji dotyczącego badanego serwisu.

Badanie trwa maksymalnie 20 minut.

Page 30: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Wygląd badania

Page 31: 2010.09 Badania użyteczności online

UseLab Sp. z o.o. www.uselab.pl, tel. (22) 863 20 71, [email protected]

Tymczasownik – wyniki badaoZadanie: Spróbuj dodad komentarz do którejś z notek na blogu

To zadanie zostało zrealizowane poprawnie przez 13% użytkowników,

87% osób nie zrealizowała tego zadania bądź zrealizowała je

nieprawidłowo.

Przyczyny:

1.W formularzu brakuje oznaczenie pól obowiązkowych. Użytkownik

wpisując komentarz nie wie jaką minimalną ilośd danych powinien

wpisad. (wymagany jest chociażby adres email).

2.Jeżeli użytkownik nie umieści wszystkich wymaganych danych, wówczas

wyświetla mu się komunikat błędu. Komunikat jest na osobnej stronie, na

której znika cała identyfikacja graficzna bloga. Użytkownik nie dośd, że

znajduje się w zupełnie nowym miejscu to aby uzupełnid brakujące dane

musi cofnąd się o jedną stronę.

3.Użytkownik, który wrócił na wcześniejszą stronę aby uzupełnid dane

otrzymuje formularz, w którym nie ma zaznaczonego pola, które należy

uzupełnid. Użytkownik z niezrozumiałych przyczyn musi zapamiętywad,

gdzie pojawił się błąd.

Rekomendacje

1.Należy wskazad pola obowiązkowe – standardowo, gwiazdkę przy

etykiecie pola

2.Komunikaty błędu muszą wyświetlad się w ramach formularza – musi

byd widoczny opis błędu, jego lokalizacja.

3.Jeśli to możliwe – należy udostępnid możliwośd uploadowania avatara

bez konieczności korzystania z zewnętrznego serwisu.

31

13%

77%

10% sukces

porażka

zadanie porzucone

Page 32: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Wynik

Widzimy, że użytkownicy odnajdywali

odpowiednią stronę,

Odnajdywali odpowiedni formularz,

Mieli trudności z jego poprawnym wypełnieniem,

Prawdopodobnie nie rozumieli etykiet pól?

Prawdopodobnie komunikaty błędów nie

pomagały im w ukooczeniu zadao,

Prawdopodobnie sfrustrowani opuszczali stronę,

W rezultacie nie kooczyli zadania.

Tutaj musimy się trochę domyślać.

Możemy próbować pytać o to

w kwestionariuszach umieszczanych

po zadaniu.

Page 33: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Co zrobid, żeby dane były wartościowe?

Bardzo ważny jest sposób zadania pytania

Jeśli poprosimy użytkowników o znalezienie pewnych typów

informacji i oni je bez trudu odnajdą

To nie mamy jeszcze pewności czy informacja ta była

przydatna

Ani czy była dla nich zrozumiała

Warto zadawad pytania sprawdzające

Albo zweryfikowad innymi metodami

Page 34: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Wniosek

Testy z udziałem moderatora zawsze dadzą nam informacje

bardziej pogłębione niż badania online,

Metody online są świetne do diagnozy problemów, ale dają

mniejsze możliwości jeśli chodzi o dotarcie do ich źródeł,

Często odpowiedzi na wiele pytao np. dotyczących obszarów

problemowych znajdziemy sięgając do statystyk, które już istnieją,

jeśli najpierw poznamy statystyki to będziemy mądrzejsi

projektując badanie,

Dla pełnego obrazu łączymy metody

Page 35: 2010.09 Badania użyteczności online

UseLab Sp. z o.o. www.uselab.pl, tel. (22) 863 20 71, [email protected]

Case study – Bank Millennium

Styczeo 2009

(obserwacja użytkownika) na klikalnych prototypach

HTML serwisu informacyjnego i systemu

transakcjnego

maj 2006 -styczeo 2007

Projekt badawczy

Weryfikacja - Maj 2010

Zdalne badania z użytkownikami na działającym serwisie

testy z użytkownikami, analiza ekspercka,card sorting serwisu informacyjnego i transakcyjnego

Page 36: 2010.09 Badania użyteczności online

UseLab Sp. z o.o. www.uselab.pl, tel. (22) 863 20 71, [email protected]

Procedura badawcza – testy w labolatorium

W celu analizy użyteczności serwisu została zastosowana metoda

obserwacyjna polegająca na rejestracji wykonywanych zadao przez

badanego w warunkach laboratoryjnych.

Podczas badania zastosowano stanowisko komputerowe typu PC z

podłączeniem do Internetu, przy którym badany wykonywał zadania.

W oddzielnym pomieszczeniu znajdował się moderator będący, przy

wykorzystaniu głośników i mikrofonów, w stałym kontakcie z osobą

badaną.

Wykorzystując specjalistyczne narzędzia pomiarowe moderator posiadał

podgląd na wykonywane przez badanego czynności, jednocześnie opisując

występujące problemy specjalnymi znacznikami (markami).

Page 37: 2010.09 Badania użyteczności online

UseLab Sp. z o.o. www.uselab.pl, tel. (22) 863 20 71, [email protected]

Procedura badawcza – testy w labolatorium

Osoba badana miała do wykonania 10 scenariuszy na stronie.

Osoby proszone były o „głośne myślenie” oraz komentowanie

wykonywanych czynności. Po każdym zadaniu moderator inicjował krótką

rozmowę dotyczącą odczud osoby badanej związanych z daną częścią

serwisu.

Podczas badao prowadzony był zapis audio i video, próbki materiałów

dostarczone zostały razem z raportem.

Każda osoba po badaniu otrzymała wynagrodzenie.

Badanie jednej osoby trwało około 65 minut.

Page 38: 2010.09 Badania użyteczności online

UseLab Sp. z o.o. www.uselab.pl, tel. (22) 863 20 71, [email protected]

Strona główna Banku Millennium (stara wersja)

Page 39: 2010.09 Badania użyteczności online

NIEINTUICYJNE NAZEWNICTWOStrona główna Banku Millennium (stara wersja)

Page 40: 2010.09 Badania użyteczności online

UseLab Sp. z o.o. www.uselab.pl, tel. (22) 863 20 71, [email protected]

Poprawa nazewnictwa

Zadanie:

„Chciałbyś przeznaczyd 10 000 PLN na miesięczną lokatę.

Znajdź ofertę lokaty o najwyższym oprocentowaniu.”

Problem: link „Millennium”

Spodziewano się „Oferta Indywidualna” lub podobnego

Page 41: 2010.09 Badania użyteczności online

NIEWIDOCZNOŚD SUBMENUPrototyp nowego serwisu

Page 42: 2010.09 Badania użyteczności online

UseLab Sp. z o.o. www.uselab.pl, tel. (22) 863 20 71, [email protected]

Niewidocznośd submenu

Strona główna Banku Millennium (prototyp nowej wersji)

Page 43: 2010.09 Badania użyteczności online

UseLab Sp. z o.o. www.uselab.pl, tel. (22) 863 20 71, [email protected]

Niewidocznośd submenu

Zadanie:

„Proszę otworzyd konto w Banku Millennium”

Problem:

Badani w poszukiwaniu produktów bardziej skupiali się na

menu bocznym „Najczęściej odwiedzane” niż na poziomym

podmenu działu „Indywidualni”.

Generalnie w całym serwisie menu boczne było lepiej

widoczne niż submenu górne.

Page 44: 2010.09 Badania użyteczności online

UseLab Sp. z o.o. www.uselab.pl, tel. (22) 863 20 71, [email protected]

Zmiany wprowadzone po badaniach

Kolor submenu górnego został zmieniony z białego na szary,

który bardziej kontrastuje z tłem strony.

Zwiększono rozmiar czcionki dla odnośników w submenu

z 11px do 12px.

Zmieniony został kolor odnośników w submenu na niebieski

(taki, jak dla pozostałych linków w serwisie).

Page 45: 2010.09 Badania użyteczności online

UseLab Sp. z o.o. www.uselab.pl, tel. (22) 863 20 71, [email protected]

Niewidoczne submenu

Page 46: 2010.09 Badania użyteczności online

UseLab Sp. z o.o. www.uselab.pl, tel. (22) 863 20 71, [email protected]

Metoda badawcza

Badanie online

W celu analizy sposobów eksploracji serwisu została zastosowana metoda badao online.

Podczas procedury osoby badane wykonywały krótkie zadania w obrębie serwisu

informacyjnego Millennium Bank.

Badanie jednej osoby trwało około 25 minut.

Dzięki metodzie badao online możliwe jest obiektywne stwierdzenie:

▫ Jak użytkownik korzysta z serwisu w naturalnych dla osoby warunkach?

▫ Jakie są naturalne nawyki osób badanych wobec eksplorowanego serwisu?

▫ Jakie obszary serwisu sprawiają użytkownikowi problemy?

▫ Zbadanie ścieżek zainteresowania, czyli kolejnośd, w jakiej osoba eksploruje serwis?

Page 47: 2010.09 Badania użyteczności online

UseLab Sp. z o.o. www.uselab.pl, tel. (22) 863 20 71, [email protected]

Procedura badawcza - online

Jak wyglądał proces?

Na głównej stronie serwisu zostało wyświetlone zaproszenie do badao online (w postaci banneru)

Badanie składało się z 3 zadao do wykonania – o odmiennej trudności (ułożone tak, aby wskaźnik

rezygnacji był możliwie jak najmniejszy).

Po każdym z zadao użytkownik wypełniał ankietę satysfakcji mającą na celu:

1) określid na ile strona sprostała jego oczekiwaniom podczas wykonywania danego zadania

2) poznad jakie były jego odczucia wobec serwisu

3) zebrad opinie odnośnie serwisu

W koocowej części badania użytkownik wypełniał ankietę podając swoje dane metryczkowe

Page 48: 2010.09 Badania użyteczności online

UseLab Sp. z o.o. www.uselab.pl, tel. (22) 863 20 71, [email protected]

Ukooczone zadania

(procent osób, które podały prawidłową odpowiedź)

Średni czas potrzebny na wykonanie zadania

(w minutach)

Wyższy procent ukooczenia zadania oznacza lepiej zaprojektowaną

funkcjonalnośd.

Szybsze wykonanie wskazuje lepiej zaprojektowaną funkcjonalnośd.

Wnioski:

Najłatwiejszym zadaniem było zadanie 2 – kalkulator hipoteczny (średnio), jego wykonanie zajmowało badanym najwięcej czasu (średnio 4

minuty 45 sekund)

Najtrudniejszym zadaniem okazało się zadanie 1 – znalezienie oprocentowania lokaty,

Klienci indywidualni – efektywnośd wykonania

50,00%

65,22%

58,70%

50,00%

34,78%

41,30%

0,00% 10,00% 20,00% 30,00% 40,00% 50,00% 60,00% 70,00%

zadanie 1

zadanie 2

zadanie 3

nieukooczone

ukooczone

2:24

4:45

2:24

0:00 1:12 2:24 3:36 4:48 6:00

zadanie 1

zadanie 2

zadanie 3

czas potrzebny na wykonanie zadania

Page 49: 2010.09 Badania użyteczności online

UseLab Sp. z o.o. www.uselab.pl, tel. (22) 863 20 71, [email protected]

Badania online – opis wykonania (poprawna odpowiedź)

4 %

1

2

15 osób

4 osoby

3 osoby

3

Page 50: 2010.09 Badania użyteczności online

UseLab Sp. z o.o. www.uselab.pl, tel. (22) 863 20 71, [email protected]

Badania online – opis wykonania (błędna odpowiedź)

50

4,5 %

1

2

10 osób

3 osoby

3 osoby3

16 osób

Page 51: 2010.09 Badania użyteczności online

BADANIA ONLINE VS BADANIA W

LABORATORIUMRodzaje danych

Page 52: 2010.09 Badania użyteczności online

UseLab Sp. z o.o. www.uselab.pl, tel. (22) 863 20 71, [email protected]

Obserwacje:

Osoby badane nie miały większych trudności z odnalezieniem odpowiedniego miejsca w serwisie. Większośd

badanych kierowała się do spisu kart kredytowych poprzez box ze strony głównej.

Po wejściu w formularz wniosku o kartę badani mieli trudności z interpretacją i zrozumieniem oraz

pomijanie pewnych pól formularza co znacznie zwiększało ilośd błędów oraz czas wypełnienia wniosku i

spowodowało, że częśd badanych nie zmieściła się w wyznaczonym czasie 14 minut.

Problemy i usterki:

Pomijanie pól takich jak: adres e-mail, pesel, wybór karty, miasto i oddział obsługi

Zła interpretacja pól takich jak: wnioskowana kwota, zobowiązania, status dewizowy

Przed przejściem „dalej” klikanie w przycisk „zapisz”

52

Rodzaje danych uzyskiwanych w badaniu w laboratorium

Page 53: 2010.09 Badania użyteczności online

UseLab Sp. z o.o. www.uselab.pl, tel. (22) 863 20 71, [email protected]

Komentarze badanych:

„To nie było takie trudne”

„Niejasne były zobowiązania, myślałam, że to będzie przyznana kwota”

„Szybko mi to zajęło”

„Precyzyjnie i łatwo, krok po kroku”

„Kwota wnioskowana to ten limit jaki mogę wypłacad z bankomatu?”

Dane liczbowe: (interpretowane wyłącznie jakościowo)

Liczba błędów w poszczególnych zadaniach

Czas realizacji zadao

Liczba zadao ukooczonych samodzielnie

Reakcje użytkownika:

Spontaniczne wypowiedzi, wykrzykniki

Mimika

Ton głosu

Gesty

Rodzaje danych uzyskiwanych w badaniu w laboratorium

Page 54: 2010.09 Badania użyteczności online

UseLab Sp. z o.o. www.uselab.pl, tel. (22) 863 20 71, [email protected]

Dane ilościowe:

Dzięki możliwości realizowania badao zdalnych na dużych próbach użytkowników - możliwe

jest uzyskanie danych ilościowych

Czas realizacji zadao, liczba błędów, podpowiedzi

Dane z ankiety satysfakcji

Problemy i usterki:

Ścieżki poruszania się po aplikacji – możliwośd wyodrębnienia wzorców zachowania

Mapy kliknięd

Rodzaje danych uzyskiwanych w badaniu w badaniu online:

Page 55: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Jak sprawdzid czy nam się udało?

Poprawa kluczowych statystyk

Wzrost satysfakcji użytkowników

Page 56: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Jak sprawdzid czy nam się udało?

Poprawa wyników finansowych

Poprawa wskaźników użyteczności

Page 57: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Jak sprawdzid czy nam się udało?

Przede wszystkim sprawdzad cyklicznie

Badad zmianę

Jedne metody weryfikowad innymi

Page 58: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Inne metody zdalne

Jeśli tylko jest to możliwe - nie polegamy na jednej technice badawczej

Łączenie innych badao zdalnych z badaniami użyteczności Pozwala to spojrzed na stronę z różnej perspektywy

Google Analytics

IDI zdalne

Focusy zdalne

ClickTale

Page 59: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Inne metody zdalne

ClickTale

Narzędzie, które umożliwia: nagrywanie całych sesji i zachowao użytkowników na stronie:

sygnalizowanie kliknięd, przewijanie strony, naciśnięcie klawiszy

Heatmaps, click maps czyli tzw. mapa cieplna poprzez zsumowanie ruchów , kliknięd, myszy tysięcy użytkowników na stronie internetowej, tworzy kompleksową, wizualną reprezentację tego na czym odwiedzający skupiają największą uwagę

attention heatmaps kolejne z cyklu heatmaps narzędzie pozwalające sprawdzid na jakich elementach strony użytkownicy skupili najwięcej uwagi

scroll reach heatmaps funkcjonalnośd pozwala określid jak daleko nasza strona była przewijana

Page 60: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Inne metody zdalne

ClickTale – szczegółówe analizy

analiza formularzy, pola formularza najczęściej niewypełniane, czas na wypełnienie formularza, pola były wypełniane jako ostatnie, konwersja, które pola formularza, pola źle rozumiane

analiza linków, mierzy: ilośd kliknięd, ilośd tzw. hover czyli najechania kursorem na link ale bez klikania, ilośd hover-ów które zakooczyły się kliknięciem,

raporty przedstawiające: strony o najlepszym i najgorszym zainteresowaniu użytkowników, strony najwięcej i najmniej klikane, sprawdzenie na których stronach pojawiają się błędy i co jest ich przyczyną, najszybciej i najwolniej ładujące się strony

Page 61: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Inne metody zdalne

ClickTale – szczegółówe analizy

Page 62: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Inne metody zdalne

IDI zdalne

FGI zdalne

W tej chwili dwa trendy – wykorzystywanie narzędzi autorskich lub istniejących komunikatorów

Umożliwiają dostęp do bardziej zróżnicowanych i trudnodostępnych grup, np. osoby pracujące na kierowniczych stanowiskach, rodzice, osoby niepełnosprawne.

Badani mogą wziąd udział w badaniu w dogodnym dla nich czasie – bez konieczności przyjeżdżania do laboratorium - co zwiększa prawdopodobieostwo, że osoba będzie mogła wziąd udział w badaniu.

Dzięki fizycznemu dystansowi badanym jest łatwiej wypowiadad się szczerze w wielu, często trudnych, drażliwych, wstydliwych kwestiach.

Możliwośd prezentacji różnego rodzaju materiałów multimedialnych.

Okoliczności badania nie ingerują zbytnio w sytuację uczestnika – badanie ogranicza się wyłącznie do czasu wywiadu.

Page 63: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

No to kiedy badad metodami online?

Chcemy przeprowadzid badania porównawcze np. testy A/B dwóch projektów danej strony, a o wyborze jednego z nich mają decydowad wskaźniki ilościowe.

Zależy nam na wstępnej identyfikacji obszarów problemowych w obrębie badanego serwisu, który zostanie następnie przebadany szczegółowo przy użyciu innej metody (np. audyt ekspercki, testy laboratoryjne).

Zależy nam na zebraniu istotnych statystycznie danych dotyczących kilku podstawowych mierników interakcji z serwisem np. czas dotarcia do określonej informacji na stronie, współczynnik sukcesu w dotarciu do danych informacji itp.

Scenariusze zadao, o których wykonanie zamierzamy prosid użytkowników, są relatywnie krótkie i dają się opisad w jednym zdaniu, bez ryzyka niezrozumienia polecenia

Zależy nam na zbadaniu rzeczywistych użytkowników danego serwisu, a dotarcie do nich innymi kanałami byłoby trudne, czasochłonne bądź bardzo drogie.

Czas na przeprowadzenie badania jest krótki a wymagana grupa osób badanych relatywnie duża.

Zależy nam na szybkim potwierdzeniu własnych przypuszczeo, które opieramy na podstawie innych wiarygodnych danych np. danych z innych podpiętych pod stronę aplikacji (Google Analytics, ClickTale), danych z innych badao.

Page 64: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Dziękujemy

Teresa BartoszewiczUsability Consultant

[email protected]

Agnieszka JedynastaUsability Consultant

[email protected]

Page 65: 2010.09 Badania użyteczności online

UseLab Sp. z o.o.

Adres spółki:UseLab Sp. z o.o.

ul. Popularna 4/6 02-473 Warszawa

www.uselab.pl

UseLab Consulting GroupProjektowanie, Badania, Doradztwo

Skontaktuj się z nami

Artur Michalak

Account Manager

tel. 502 402 050

mail. [email protected]