今日のフォーカス
低い基準率を無視して「精度99%」を鵜呑みにするベースレート無視(Q1)、部分集合ごとの傾向が全体では逆転するシンプソンのパラドックス(Q2)、サンクコスト・計画錯誤・グッドハートの法則が絡み合って撤退判断を狂わせる複合バイアス(Q3)。核心は、表面に出てくる「1つの数字・1つの結論」を鵜呑みにせず、その数字がどう計算され、何を除外し、何によって歪められうるかを分解して検証する規律にある。
ベースレート無視
検知対象の発生率が低いと、感度・特異度がどれだけ高くても、フラグが立った中で実際に真である割合(適合率)は発生率に強く引きずられて低くなる。
シンプソンのパラドックス
各部分集団では一貫した傾向があっても、集団の構成比(重み付け)が異なると全体を合算した際に傾向が逆転する現象。
サンクコストの誤謬
回収不能な過去の投資を、未来の意思決定の判断材料に持ち込んでしまう誤り。判断は「これから」の期待値だけで行うべき。
グッドハートの法則
測定される指標が目標になった瞬間、その指標は本来測ろうとしていた実態の良い代理変数であることをやめる。
経理部の岡本さんが導入したAIツールは「感度99%・特異度99%」。年間経費申請5,000件のうち実際の不正は10件(0.2%)。今年度ツールがフラグを立てたのは60件で、岡本さんは「精度99%なのだから、フラグが立った60件はほぼ間違いなく不正」と考え、全員に始末書と権限停止という厳格な処分を提案しようとしている。
- 岡本さんの「フラグが立った60件はほぼ不正だろう」という推論の誤りを、感度99%・特異度99%・不正の発生率0.2%という数字を使って具体的に計算し、指摘せよ
- なぜ「精度99%」という高い数字にもかかわらず、フラグが立った申請の中で実際に不正だった割合はこれほど低くなるのか、その構造的な理由を説明せよ
- このAIツールを経費不正の検知に実務で活用するとしたら、岡本さんはフラグが立った申請をどのように扱うべきか。運用ルールを設計せよ
フラグが立った60件の内訳——真陽性は約10件、偽陽性は約50件
① 推論の誤りと具体的な計算
② なぜ精度99%でも適合率が低くなるのか
③ 実務での運用ルール設計
実践への応用
セキュリティ運用(アラート疲れ)
不正アクセス検知の大量アラートも、真の攻撃発生率が低ければ大半が偽陽性になる。全アラートを同列に扱うと運用が破綻する。
採用スクリーニング
「離職リスク検知AI」も、実際の早期離職率が低ければフラグが立った候補者の大半は実際には長く活躍する人材の可能性が高い。
医療・健康診断の読み方
発症率の低い疾患のスクリーニング検査で「陽性」でも、精密検査を受けるまでは適合率の構造を理解した上で受け止める。
営業VPの宮下さんは、東京支社(290件中48件成約、16.6%)と大阪支社(290件中104件成約、35.9%)の全体成約率を見て「大阪の営業力は圧倒的に高い」と発言した。しかし東京支社マネージャーがセグメント別データを示すと、エンタープライズ(東京12.0% vs 大阪10.0%)・中堅SMB(東京45.0% vs 大阪40.0%)のどちらも東京支社が上回っていた。
| セグメント | 東京支社 | 大阪支社 |
|---|---|---|
| エンタープライズ | 250件中30件成約(12.0%) | 40件中4件成約(10.0%) |
| 中堅・SMB | 40件中18件成約(45.0%) | 250件中100件成約(40.0%) |
| 合計 | 290件中48件成約(16.6%) | 290件中104件成約(35.9%) |
- なぜ各セグメントでは東京支社が上回っているのに、全体の合計では大阪支社が上回るという逆転が起きるのか、数学的な構造を説明せよ
- 宮下さんの結論はどこが誤っており、正しくはどのようなデータの見方をすべきだったかを述べよ
- この事実を踏まえ、東京支社と大阪支社の商談配分・評価制度を今後どう設計すべきか、具体的に提案せよ
構成比の偏りが、各セグメントの優劣とは逆の全体像を作る
① 逆転が起きる数学的な構造
② 宮下さんの結論の誤りと正しい見方
③ 商談配分・評価制度の再設計
実践への応用
人事評価・部門横断比較
部署ごとに担当案件の難易度・属性構成比が違う場合、単純な成績合計での部署間比較は同様の罠に陥る。
プロダクト分析(A/Bのセグメント合成)
施策の効果を全ユーザー平均で見ると、ユーザーセグメント構成比の違いによって真の効果が見えなくなることがある。
医療統計の古典例
治療法の効果を病状の重さで分けずに全体比較すると、実際には劣る治療法の方が"良く見える"ことがある。
当初「6ヶ月・1,500万円」の計画が、12ヶ月経過しても進捗40%、既に1,200万円投入済み。直近3ヶ月で「タスク完了数」というKPIが急伸しているが、実際は大きなタスクを細分化しただけで実質的な機能完成度は変わっていない。経営会議では「もう1,200万円もかけたのだから続行すべき」という意見が大勢を占めている。
| 項目 | 当初計画 | 実績 |
|---|---|---|
| 期間 | 6ヶ月 | 12ヶ月経過(継続中) |
| 予算 | 1,500万円 | 1,200万円投入済み |
| 進捗率 | 100%想定 | 約40%(自己申告) |
| KPI「タスク完了数」 | 直近3ヶ月で急伸——ただしタスク細分化によるもので機能完成度は不変 | |
- 「もう1,200万円もかけたから続けるべき」という主張の論理的欠陥を、サンクコストの誤謬の観点から指摘せよ。あわせて本来使うべき正しい判断基準を述べよ
- 当初計画(6ヶ月)と実績(12ヶ月で40%)の乖離から、どのような計画錯誤が働いていた可能性があるかを分析せよ。残り作業の再見積もりで何を修正すべきか
- 「タスク完了数」がグッドハートの法則でどう歪められたかを説明し、代替的な指標設計を提案せよ。あわせて経営会議への意思決定プロセスを総合的に述べよ
3つのバイアスが1つの継続判断の中で連鎖する
① サンクコストの誤謬と正しい判断基準
② 計画錯誤の分析と再見積もりの修正
③ グッドハートの法則と意思決定プロセスの設計
実践への応用
プロジェクトマネジメント全般
予算超過・スケジュール遅延したプロジェクトの継続判断は業界を問わず発生する。サンクコストを判断から切り離す規律を投資委員会のガバナンスとして制度化すべき。
個人のキャリア・資格試験
「もう2年も勉強したから今更やめられない」という個人の意思決定にも同じ構造のサンクコストの誤謬が働く。
プロダクトKPI設計
「PVを増やす」といったKPIも達成そのものが目的化すると、質を伴わない水増しに繋がる。グッドハートの法則を前提に定期的な見直しが必要。
今日のまとめ・次回へ
今日Q2で扱った「全体の合計だけでなく、構成比を揃えて比較する」という発想は、戦略立案における市場・競合比較にも直結する——市場全体のシェアだけでなくセグメント別のポジショニングを見なければ本当の競争優位は見えない。Q3で扱った「サンクコストを判断から切り離し、未来志向の期待値で意思決定する」という規律は戦略的な投資判断・撤退判断そのものであり、明日はこれをより広い戦略立案・組織へのコミュニケーションの文脈に接続していく。