A/Bテストと多変量解析テストの成功事例 – Conversion Conference 2011 | SEO Japan

2つ目のセッションは、まさに直球ど真ん中ともいうべき、スプリットランテスト（A/Bテスト）と多変量解析（マルチバリエイト）テスト。事例ベースのセッションなので参考になる・驚きのあるデータが多数あります。特に「ページの表示速度」とコンバージョンの関係はSEOに関わる人も注目。 — SEO Japan スピーカーはSiteSpectのエリック・J・ハンセンとWingifyのパラス・チョプラ。SiteSpectは有名なLPOツールの会社です。Wingifyは簡単LPOで最近話題のビジュアルサイトオプティマイザーの会社なんですね。 まずはWingifyのパラス・チョプラ。 僕らのクライアントの結果は平均50%コンバージョンがあがった、といきなり宣言。常に保障はできないけどね、と笑いを取ってセッション開始。 A/Bテストと多変量解析テストのどっちが効果的か？ 多変量解析テストはテクノロジーも優れているし、魅力的だがA/Bテストでも効果を十分に上げることができる。 A/Bテストはディテールでは無く、様々なユーザー体験をテストすることができる。例えばページ全体のデザイン。メッセージング。A/Bテストで効果的なデザインテンプレートを発見した後、多変量解析テストでさらに効果を上げることができる。 Test Among Good Options（TAGO) テストすべき要素はほんの一部しかない。無駄なテストはしない。100%の中の極数%。逆にいうと間違ったテストをしない。 （ここでデザインが良いサイトと悪いサイトを見せる） どっちのコンバージョンが高いと思う？80%がデザインが良いサイトに挙手。 何故か？画像が多い。デザインが綺麗で信頼性がある。ブランド認知度が高い。ナビゲーションが簡単。などなど。 実際に大半の人がデザインが良かったサイトが良いと思う。 その決断は一瞬でなされる。1/20秒以下で決まる。 ファーストインプレッションは重要。 最初の決断は、最後のコンバージョンに大きな影響がある。様々な調査で証明されている。 コンバージョン・ファンネルのボトムから変える。 ショッピングサイトの決済ページのユーザビリティ。サイト内の利用率自体はホームページや商品ページに比べ必然的に低くなるが、改善することでのコンバージョン改善率は極めて高い。サイトのデザインは色々手を加えるのに決済ページの改善をやってないサイトが多すぎることに、いつもイライラする 笑 例えば決済ページに、購入完了までのステップ数を表示したり、セキュリティ証明の画像を張るだけでも効果がある。とある事例では（lumensという照明家具の通販サイト）決済ページのコンバージョン率が50%も上がった。 他にも例えば登録ユーザーのログインページ。新規ユーザーの登録リンクを目立たせていない、登録ユーザーが前提になっているようなページが多い。 ログインページで新規ユーザーと既存ユーザーへのアプローチを同等にすることが重要。新規ユーザー登録率が上がる。 他の改善事例。 ランディングページをリデザインし、基本となるテンプレートを作成した上でターゲットユーザー別のランディングページを作成。 ベースのテンプレート。大きな画像。より魅力的な登録ボタン（登録、ではなく、＊＊を始める！）。コンバージョンまでのステップ数を表示数。 アドワーズ広告のキーワードやメッセージ別に全部個別のランディングページを作成。結果、30%のコンバージョン改善を実現。1年で1億円近い売上アップ。ROI1600%。実施に3週間。 あなたが思っているより改善できることは多い！ 次はSiteSpectのエリック・J・ハンセン。Mozilla.comのFirefoxダウンロードサイトの改善例を紹介。 Mozilla.comは実は世界でアクセス数が多いサイトのトップ50に入るサイト。1カ月のページビューは2009年12月で700万。Firefoxのシェアは2009年で40%。ダウンロード数は1300億以上。 FirefoxとMozilla.comに可能な限り最高のユーザー体験を提供するモラル的な必要性がある。 – Mozilla.com CEO サイトの最適化に社内で2名の専属のチームがいる。 2009年の11月、mozilla.comは最適化テストは長期的に常に行っていく作業ということを社内で認識し、より本格的な最適化テストを行うことにした。 テスト1: ・コンバージョン = Firefoxのダウンロード数 ・ちなみにFirefoxのダウンロードページのコンバージョン率は80%近い ・ダウンロードのランディングページを改善し、コンバージョン率を改善 ・多変量解析テストを実施。32のバリエーション。 ・・「機能」に関するコピー ・・「ティップス」に関するコピーの場所 ・・フッターの詳細 ・・ボタンのデザイン ・・ダウンロードの統計 ↓ 主に3つのパターンでテスト。 [...]