4.9 数値を正しく解釈するための統計の基礎

平均・割合・誤差の考え方で、数値を読み違えないようにします。
基礎書籍換算 約 10 ページ

この章で学ぶこと

  • 平均値の落とし穴と、中央値・分布の見方
  • 割合を見るときは母数(分母)を必ず確認すること
  • 曜日・季節・偶然による数値のばらつき
  • 相関と因果の違い
  • 差が「意味のある差」かどうかを、ざっくり判断する方法

ポイント この章では、難しい数式は使いません。アクセス解析の数値を見るときに、「この数字を信じてよいか」を判断するための考え方を身につけることが目的です。

平均値の落とし穴

GA4 には、「平均エンゲージメント時間」「平均購入収益額」など、平均 の指標がたくさんあります。平均は便利ですが、注意しないと実態を見誤ります。

外れ値に引っ張られる

次のような 5 人のユーザーのエンゲージメント時間を考えてみましょう。

ユーザー A:10 秒
ユーザー B:15 秒
ユーザー C:20 秒
ユーザー D:25 秒
ユーザー E:30 分(1,800 秒) ← ページを開いたまま作業していた

この 5 人の平均は、(10 + 15 + 20 + 25 + 1,800) ÷ 5 = 374 秒(約 6 分) です。しかし、5 人のうち 4 人は 30 秒未満で、平均の「約 6 分」は誰の実態も表していません。

このように、ごく一部の極端な値(外れ値)があると、平均は大きく引っ張られます。

中央値と分布を見る

外れ値の影響を避けるには、次のような見方をします。

見方内容上の例では
中央値値を小さい順に並べたときの真ん中の値20 秒
分布どの範囲に何人いるか30 秒未満:4 人、30 秒以上:1 人

GA4 の標準レポートでは中央値は表示されませんが、BigQuery(第 10 部)を使えば計算できます。また、探索レポートで「エンゲージメント時間が 10 秒以上のセッション」のようにセグメントで分けて人数を比べると、分布に近い見方ができます。

ポイント 平均購入収益額(客単価)も、一部の大口の購入に引っ張られることがあります。客単価が急に上がったときは、少数の高額な注文がないかを、取引 ID ごとの収益で確認しましょう。

割合と母数

エンゲージメント率やキーイベント率などの 割合 を見るときは、必ず 母数(分母となる数)を確認しましょう。

母数が小さいと割合は暴れる

ランディング ページセッション数キーイベント数キーイベント率
/lp/a/5,0001002.0%
/lp/b/20210.0%

(数値は例)

この表だけを見ると、/lp/b/ のほうがキーイベント率が 5 倍高い「優秀なページ」に見えます。しかし、/lp/b/ のセッションはたった 20 回です。キーイベントがあと 1 件少なければ 5.0%、1 件多ければ 15.0% になります。母数が小さいと、たまたまの 1 件で割合が大きく変わる のです。

判断の目安

割合で判断するときは、次のような目安を持っておくとよいでしょう。

  • 分子(キーイベント数など)が少なくとも数十件あるか:分子が数件しかない割合は、偶然の影響が大きい
  • 期間を延ばすと傾向は変わらないか:1 週間で高かった割合が、1 か月で見ても高いか
  • 割合と件数を必ず並べて見る:「キーイベント率 10%(20 セッション中 2 件)」のように、件数を添えて報告する

割合の平均に注意

割合どうしを単純に平均してはいけません。

ページ A:セッション 1,000、キーイベント 30(3.0%)
ページ B:セッション 100、キーイベント 10(10.0%)

割合の単純平均:(3.0% + 10.0%) ÷ 2 = 6.5%  ← 誤り
全体のキーイベント率:(30 + 10) ÷ (1,000 + 100) = 3.6%  ← 正しい

複数の行の割合をまとめたいときは、分子と分母をそれぞれ合計してから割り算しましょう。

ばらつきと季節性

アクセス解析の数値は、毎日一定ではなく、さまざまな理由で ばらつき ます。数値の変化を見たときは、それが「意味のある変化」なのか「いつものばらつき」なのかを見極める必要があります。

主なばらつきの要因

要因内容例
曜日曜日によってアクセスが変わるBtoB サイトは平日が多く、週末が少ない。EC サイトは週末や夜が多いことも
季節季節や月によって需要が変わる年末商戦、新生活シーズン、夏休み、年度末
イベント特定の出来事で一時的に変わるテレビでの紹介、SNS での拡散、セール、メールの配信
外部要因サイトの外の変化検索エンジンのアルゴリズムの変更、競合の動き、天候、ニュース
偶然特に理由のない上下数が少ないほど大きく揺れる

ばらつきを考慮した比較の方法

  • 曜日をそろえる:前週の同じ曜日、または 7 日単位・28 日単位で比べる
  • 前年同期と比べる:季節性の影響を除いて比べたいときは、前年の同じ時期と比べる
  • 移動平均で見る:日別の数値の代わりに、過去 7 日間の平均の推移を見ると、曜日のばらつきがならされて傾向がわかりやすくなる
  • 施策のカレンダーを残す:メールの配信日、キャンペーン、サイトの更新などを記録しておき、数値の変化と照らし合わせる

ポイント GA4 の「注釈」機能を使うと、グラフ上に施策やサイトの変更などのメモを残せます(管理画面やレポートのグラフから追加)。数値の変化の理由をあとから振り返るときに役立つので、積極的に活用しましょう。

相関と因果

アクセス解析でよくある失敗の一つが、相関 を 因果 と取り違えることです。

  • 相関:2 つの数値が一緒に動く関係(一方が大きいと、もう一方も大きい傾向がある)
  • 因果:一方が原因となって、もう一方が変わる関係

よくある誤解の例

例 「動画を最後まで見たユーザーは、見なかったユーザーに比べて購入率が 3 倍高い。だから、動画を見てもらえば購入が増えるはずだ」

一見正しそうですが、これは相関を見ているだけかもしれません。もともと購入意欲が高い人が、商品をよく知るために動画を最後まで見ている、という可能性があります。その場合、購入意欲の低い人に無理に動画を見せても、購入率は上がりません。

誤った解釈: 動画を見る → 購入率が上がる
別の可能性: 購入意欲が高い → 動画を見る
                           → 購入する

因果を確かめる方法

因果関係を確かめるには、次のような方法があります。

方法内容
A/B テストユーザーをランダムに 2 つのグループに分け、片方だけに施策を行って比べる(第 12 部)
施策の前後比較施策の前と後で比べる。ただし、ほかの要因(季節など)の影響を除く工夫が必要
一部の地域や期間で試す施策を一部だけで実施し、実施しなかった部分と比べる

最も確実なのは A/B テストです。アクセス解析で見つけた「相関」は、改善の 仮説 として扱い、可能であればテストで確かめるようにしましょう。

有意差のざっくり判断

2 つの数値に差があるとき、その差が「偶然ではない、意味のある差」(統計的に有意な差)かどうかを判断したいことがあります。厳密には統計的な検定を行いますが、ここでは日々の分析に使える、ざっくりとした判断の方法を紹介します。

目安 1:件数が少ない差は信用しない

キーイベントが数件〜十数件程度の差は、偶然で十分に起こり得ます。たとえば、先週 12 件、今週 15 件の問い合わせがあったとしても、それだけで「改善した」とは言えません。

目安 2:期間を延ばしても差が続くか

1 週間で見られた差が、2 週間、4 週間と期間を延ばしても続くようであれば、偶然ではない可能性が高くなります。

目安 3:ほかの切り口でも同じ傾向か

ある施策の効果が、パソコンでもスマホでも、複数のチャネルでも同じように見られるのであれば、その効果は本物である可能性が高くなります。逆に、特定の切り口だけで差が出ている場合は、偶然や別の要因を疑いましょう。

目安 4:計算ツールを使う

A/B テストの結果などを判断するときは、ウェブ上で公開されている 有意差の計算ツール(「AB テスト 有意差 計算」などで検索)を使うと、2 つのグループのセッション数とキーイベント数を入力するだけで、差が有意かどうかを判定できます。詳しくは第 12 部の「A/B テストと改善施策の検証」で扱います。

判断の観点信用しにくい差信用しやすい差
件数数件〜十数件数百件以上
期間数日数週間以上
再現性特定の切り口だけ複数の切り口で同じ傾向
理由説明できない施策の内容から説明できる

よくある質問

Q. 前月比で 10% 下がりました。これは問題ですか。

A. まず、普段の変動の幅 と比べましょう。過去 12 か月の前月比が、毎月 ±15% 程度動いているなら、10% の減少は普段の範囲の中かもしれません。日数の違い、祝日、季節の影響も確認します。普段の幅を超える変化や、数か月続けて同じ方向に動く変化は、原因を調べる価値があります。

Q. 統計の知識は、どこまで必要ですか。

A. 日常のレポートでは、この章の「平均・割合・ばらつき・相関と因果」の考え方を押さえておけば十分です。A/B テストの判定や、需要の予測など、より厳密な判断が必要な場面では、統計の基礎(検定、信頼区間、回帰分析)を学んでおくと役立ちます(第 12 部の第 7 章、付録の学習ロードマップ)。

Q. 少ないデータで判断しなければならないときは、どうすればよいですか。

A. 期間を長くとる、似たページや施策をまとめて見る、などで、データの量を増やす工夫をしましょう。それでも少ない場合は、「傾向としてはこう見えるが、データが少ないため確定ではない」と、不確かさを添えて 報告することが大切です。

実践ワーク

自社の主要な KPI について、過去 12 か月の月別の値を書き出し、次の点を確認しましょう。

  1. 最も高い月と、最も低い月はいつか。その理由は何か(季節、施策、計測の変更など)
  2. 前月比の変化の幅は、普段どのくらいか(最大と最小)
  3. 前年同月と比べると、成長しているか

この「普段の幅」を知っておくと、月次の報告で「今月の変化は、普段の範囲の中か、それとも注目すべき変化か」を判断できるようになります。

まとめ

  • 平均は外れ値に引っ張られる。中央値や分布、セグメントでの比較もあわせて見る
  • 割合は必ず母数(件数)とセットで見る。割合どうしを単純に平均しない
  • 曜日・季節・イベント・偶然による数値のばらつきを考慮し、曜日をそろえる・前年と比べる・注釈を残す
  • 相関は因果ではない。アクセス解析で見つけた関係は仮説として扱い、できればテストで確かめる
  • 差が意味のあるものかは、件数・期間・再現性・理由の 4 つの観点でざっくり判断する

これで第 4 部は終わりです。理解度クイズ で確認してみましょう。次の第 5 部では、ここまでに学んだ指標とディメンションの知識を使って、GA4 の標準レポートを一つずつ読み解いていきます。