衣袋宏美のデータハックス

根拠の乏しい怪しい%データをひと目で見抜く方法とは? [アクセス解析tips]

今回は根拠の乏しい怪しいデータに一発であたりを付ける方法をお教えする。
衣袋宏美のデータハックス

さていきなり質問から入っていきたい。表1はキーワード広告の施策のデータで、広告効果測定の結果からキーワード別に主要な指標をまとめて作った表の一部である(インプレッション数やクリック数の実数はこの表では省略している)。さて、この表で気をつけるべきデータがあるのだが、それはキーワードA、キーワードB、キーワードCのうち、どれだろうか?

表1:検索キーワード広告における、キーワード別の広告効果の主要指標(抜粋)
  インプレッション数 クリック数 クリック率 購入数
(コンバージョン数)
コンバージョン率
キーワードA ・・・ ・・・ 19.9% ・・・ 10.3%
キーワードB ・・・ ・・・ 6.9% ・・・ 11.8%
キーワードC ・・・ ・・・ 10.0% ・・・ 5.0%
・・・ ・・・ ・・・ ・・・ ・・・ ・・・
キャンペーン全体 ・・・ ・・・ 13.4% ・・・ 9.8%

わからない方のために、もう少しピンポイントで質問してみよう。答えはキーワードCなのだが、その値で気をつけるべき点がある。それは何だろうか?

では、最初の表の数値部分を入れた次の表を見てほしい。キーワードCはコンバージョン率が低いので出稿をやめようと思うのだが、その判断は正しいだろうか?

表2:検索キーワード広告における、キーワード別の広告効果の主要指標
  インプレッション数 クリック数 クリック率 購入数
(コンバージョン数)
コンバージョン率
キーワードA 1,516 301 19.9% 31 10.3%
キーワードB 1,484 102 6.9% 12 11.8%
キーワードC 200 20 10.0% 1 5.0%
・・・ ・・・ ・・・ ・・・ ・・・ ・・・
キャンペーン全体 6,000 806 13.4% 79 9.8%

「きりのいい%」はサンプルが少ない可能性がある

たしかにキーワードCはコンバージョン率がほかより悪いが、購入数が1増える(または減る)とどうなるだろうか? 購入数が1件増えて2になったら、クリック数を母数とした場合のコンバージョン率は、10%に跳ね上がる(購入数が1減って0になったら0%だが)。コンバージョン率10%というと、キーワードAやBと遜色はない。

結論としては、サンプルが少ない時に成果が出ないからといって簡単には「ダメ」のレッテルを貼ることができないのだ。もう少し長い期間このキーワード広告を行いさらにデータが集まると統計的に有意なデータになっていくのだが、現時点では判断するべきではないだろう。

母数となる数が少ない場合、%はきりのよい数字になる。小数点以下が0だったり、1の位が5%区切りとか10%区切りであったり、33%、66%などの数字があれば、絶対値が表示されていない表1のようなレポートを見ただけでも「危ない」と感じられる感覚を身につけておくことが重要である。

通常、広告効果測定ツールやアクセス解析ツールで、%だけのデータ表示がされるということはあまりないと思うのだが、レポートをドリルダウンしていくと%だけになったりする場合もあるし、会議やプレゼンで提示される資料の場合は%だけであることも多い。要注意である。

またこういった各種ツールでは、コンバージョン率の高い順にソートできたりする機能があると思うが、流入数1、購入数1、コンバージョン率100%などが上位に並ぶようなケースが出てくる。このような場合は、労を惜しまずデータをダウンロードし、エクセルなどである一定以上の絶対値があるものだけに絞ってソートするなどしてみよう。

またセグメント化して深く見ていけば見ていくほど、絶対値が少なくなり評価が難しくなるというジレンマがあることも覚えておこう。

まとめ

  • きりのよい%の場合は、母数となる数が少なくないか疑う
  • サンプル数が少ない段階で簡単に評価を下すことはできない
  • セグメント化を重ねると母数が少なくなり、評価が難しくなる
この記事が役に立ったらシェア!
tweet19はてなブックマークに追加
みんなが読んでるWeb担メルマガで、あなたも最新情報をチェック
  • SEOやアクセス解析のなどノウハウをゲット
  • 事例やインタビューも見逃さない
  • 要チェックのセミナー情報も届く
  • 編集長コラムを一足先に読める
日本赤十字社 東日本大震災 義援金募集
みんなが読んでるWeb担メルマガで、あなたも最新情報をチェック
  • SEOやアクセス解析のなどノウハウをゲット
  • 事例やインタビューも見逃さない
  • 要チェックのセミナー情報も届く
  • 編集長コラムを一足先に読める

Web業界の転職情報

もっと見る
Sponsored by

今日の用語

インプレッション
ネット広告における、「広告が表示された回数」を意味する。 広告表示に関する ... →用語集へ

連載/特集コーナーから探す

インフォメーション

Web担のメルマガを購読しませんか?
Web担の記事がコンパクトに毎週届くメールマガジン「Web担ウィークリー」は、10万人が読んでいる人気メルマガ。忙しいあなたの情報収集力をアップさせる強い味方で、お得な情報もいち早く入手できます。

Web担に広告を掲載しませんか?
購読者数10万人のメールマガジン広告をはじめとする広告サービスで、御社の認知向上やセミナー集客を強力にお手伝いいたします。

サイトマップ
RSSフィード


Web担を応援して支えてくださっている企業さま [各サービス/製品の紹介はこちらから]