abテストノススメ
TRANSCRIPT
![Page 1: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/1.jpg)
2013/2/23 HDIfes
A/Bテストノススメ株式会社VOYAGE GROUP / UIO戦略室 榎本 徹
![Page 2: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/2.jpg)
自己紹介
✤ 榎本 徹(えのもと とおる)
✤ 1976年生まれ 36歳
✤ いまの仕事
✤ ポイントサイト「ECナビ」の企画運営。
✤ ウェブサイト最適化の手技法を全社に浸透させる。
![Page 3: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/3.jpg)
お話する内容
✤ WebサイトのA/Bテストは、誰でも簡単に行うことができます。これまでの経験から、実施にあたってのポイントを紹介します。
1. A/Bテストとは?
2.何がいいの?
3. A/Bテストツールとは?
4.誰がどのようなときに使うのがよい?
5.どうすすめる?
6.まとめ
![Page 4: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/4.jpg)
1. A/Bテストとは?
![Page 5: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/5.jpg)
+93.9%A オリジナル
B テストパターン1
C テストパターン2
![Page 6: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/6.jpg)
どっち? アンケートサイトの会員募集バナー
A オリジナル
B テスト パターン
![Page 7: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/7.jpg)
こっち! アンケートサイトの会員登録バナー
B テスト パターン
40.0%
![Page 8: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/8.jpg)
どっち?
A オリジナル
B テスト パターン
![Page 9: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/9.jpg)
こっち!
A オリジナル
14.2%
![Page 10: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/10.jpg)
勝ち負けを決める
✤ どのクリエイティブが良い結果を生み出すか?仮説を検証する方法。
![Page 11: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/11.jpg)
スプリット・ランで行う
✤ 時間の影響をうけない
✤ 季節・曜日
✤ イベント
✤ プロモーション
✤ 経験の影響をうけない(割り振られたパターンだけ見える)
前後テスト
スプリット・ラン テスト
![Page 12: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/12.jpg)
2. なにがいいの?
![Page 13: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/13.jpg)
オバマ大統領はA/Bテストで選挙に勝った?
http://www.flickr.com/photos/barackobamadotcom/8156768393/in/set-72157631931822826/
![Page 14: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/14.jpg)
結果
✤ 登録者 288万人 UP
✤ 献金額 54億円 UP
✤ ボランティア 28万人 UP
http://www.flickr.com/photos/barackobamadotcom/8167784426/in/photostream
![Page 15: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/15.jpg)
3. A/Bテストツールとは?
![Page 16: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/16.jpg)
ツールがしてくれること
1.実装
2.集計
3.判定
Optimizelyの例
![Page 17: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/17.jpg)
4. どのようなときに使うのがよい?
![Page 18: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/18.jpg)
Pros & Cons
A/Bテスト ラボテスト
事実を知りたい 「なぜ」を知りたい
微細な差を知りたい 全体像を知りたい
低コスト・多頻度・大規模 短時間で大きな学び
数値根拠で人を動かす リアリティで人を動かす
![Page 19: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/19.jpg)
5. どのようにすすめる?
![Page 20: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/20.jpg)
LIVESENSEでの事例
![Page 21: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/21.jpg)
LIVESENSEでの事例
![Page 22: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/22.jpg)
A/Bテストの何が成功?何が失敗?
✤ 成功:A/Bで差が出ること しかも早く=仮説が検証(Yes/No)できること
✤ 失敗:差が出るテストができないこと精神的にもつらい。
✤ テストパターンが負けるのは失敗ではない!「なぜ?」の包囲網が狭まっているはず
![Page 23: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/23.jpg)
なぜいいテストができないの?
✤ 仮説の精度が低いから。
✤ なぜ仮説の精度が低い? → 調査不足ね。
![Page 24: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/24.jpg)
調べよう
✤ アクセスログから
✤ 前後にどんなページを見ている?
✤ 検索キーワードは?(サイト内検索/流入キーワード)
✤ どんな人?(はじめて/リピーター、地域、デバイス、OS、画面サイズ・・・)
✤ ユーザーテスト/インタビュー
✤ どこでエラー?
✤ 心理モデル?(よく使うウェブサイトは? 使っている言葉?・・・)
![Page 25: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/25.jpg)
6. まとめ
![Page 26: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/26.jpg)
A/Bテストをやってみよう
✤ ツールが充実。楽チン。やるなら今。
✤ ツール紹介
✤ Optimizelyhttps://www.optimizely.com
✤ Google Analytics (ウェブテスト機能)http://www.google.co.jp/intl/ja/analytics/
✤ 情報源
✤ Which Test Won?http://whichtestwon.com
✤ UIO戦略室ブログhttp://uio.voyagegroup.com
![Page 27: Abテストノススメ](https://reader033.vdocuments.net/reader033/viewer/2022060122/5594ebe61a28ab9c5d8b459b/html5/thumbnails/27.jpg)
Thank You!