How to
クロス集計で間違えない。件数の少なさと「割合の罠」を見抜く4つの確認
間違えやすい4つの点
1. 母数が少ない
- 「A群の解約率は50%」でも、2人中1人かもしれない
- 件数も一緒に表に載せる
- 30件未満は、傾向として読む
2. 割合の取り方
- 行ごとの割合と列ごとの割合は、別の意味
- 例:「解約者のうち、1年未満の割合」と、「1年未満のうち、解約した割合」
- 何に対する割合かを、表の見出しに書く
3. 相関と因果
- 「AとBが一緒に多い」は、「AがBの原因」とは限らない
- 別の第3の要因が、両方に影響していることがある
- 因果を言うには、時間の前後、比較、仮説の検証が要る
4. 層に分けると結論が逆転する
- 全体ではAが優れて見えても、層(年代、地域)に分けるとBが優れていることがある(シンプソンのパラドックス)
- 全体の表の後に、主要な層でも確かめる
確認の問い
- 「母数は、いくつか」
- 「何に対する割合か」
- 「他に原因になりうる要因は」
- 「層に分けても同じか」
報告書での書き方
- 「〜という偏りが見られた(n=45)」
- 「原因は特定できていない。確認のため聞き取りを行う」
うまくいくとき、いかないとき
- うまくいく:仮説を立てて集計し、追加の確認につなげる
- いかない:1つの表で結論を出し、施策を決める
まとめ
- 母数、割合の分母、因果、層の4つを確かめる
- 件数を併記し、断定を避ける
- 表は仮説の入口。確認してから行動する