【統計学「p値」の謎】統計好きでも意外と知らない「数値の矛盾」の見抜き方
【統計学「p値」の謎】統計好きでも意外と知らない「数値の矛盾」の見抜き方
「すべての科学研究は真実である」と考えるのは、あまりに無邪気だ――。科学の「再現性の危機」をご存じだろうか。心理学、医学、経済学など幅広いジャンルで、過去の研究の再現に失敗する事例が多数報告されているのだ。鉄壁の事実を報告したはずの「科学」が、一体なぜミスを犯すのか?そんな科学の不正・怠慢・バイアス・誇張が生じるしくみを多数の実例とともに解説しているのが、話題の新刊『Science Fictions あなたが知らない科学の真実』だ。単なる科学批判ではなく、「科学の原則に沿って軌道修正する」ことを提唱する本書。今回は、本書のメインテーマである「再現性の危機」の実態に関する本書の記述の一部を、抜粋・編集して紹介する。
Photo: Adobe Stock
数値の誤りをどう見抜くか
科学論文において数値の誤りはどのくらいあるのだろうか。2016年に心理学者のミシェル・ナウテンが率いるオランダの研究者グループがその解明に挑んだ。彼らが使ったツールは「スタットチェック(統計チェック)」というアルゴリズムで、いわば「統計学のためのスペルチェッカー」だ。
科学論文をスタットチェックにかけると、論文中の数字を徹底的に調べてp値の間違いを指摘する。統計的検定の数値の多くが互いに依存しているため、一部の数値がわかれば、ほかの数値を再現できる(ピタゴラスの定理のおかげで、直角三角形の2辺の長さがわかれば、斜辺の長さを計算で求められるのと同じだ)。p値と他の関連する数値が矛盾しているなら、おそらく何かが正しくないのだろう。
論文3万件以上をチェック
ナウテンたちは1985~2013年に主要な8つの心理学誌に掲載された論文3万件以上をスタットチェックにかけた。この膨大なサンプルから発見されたことは、実に厄介だった。 関連する統計を含む論文の半数近くに、少なくとも1つの数値的な矛盾が見つかったのだ。公平を期して言えば、その大半は軽微なもので、全体の結果にはほとんど影響を与えていなかった。
ただし、なかには結論に大きな影響を与えるものもあった。実に13%の論文が、結果の解釈を完全に変えるかもしれない重大な誤りをおかしていた(たとえば、統計的に有意なp値を有意でないp値に変えたり、その逆もあった)。
もちろん、このような矛盾は、単純なタイプミスやコピー・アンド・ペーストのミスから意識的な不正行為まで、さまざまな理由で起こり得る。スタットチェックは科学的な文脈において誤りを強調するためのもので、真相究明をするわけではない。
「意外」をもっと詳しく
「意外」のニュース
-
乃木坂46メンバーの“バイト歴”が話題「意外だった」「絶対可愛くて目立つ」5月20日16時57分
-
2024年5月20日〜5月26日の運勢「おとめ座(乙女座)」 章月綾乃の【大人のための星占い】5月20日11時15分
-
実況!昼下がりの喫茶店、絵に描いたような口調のマダムと電話で怒られてるかもしれない人に挟まれて…渡邊圭祐の[箸休め]5月20日10時0分
-
紫式部と真田幸村の意外な共通点、大河ドラマの主人公になりやすい特徴とは?5月20日8時0分
-
テレビ東京「何を隠そう...ソレが!」(1) 意外な組み合わせ ゲストとの化学反応楽しみ5月20日7時0分
-
亀梨和也、WBC現地取材の裏話披露 大谷翔平選手との意外な関係も語る5月20日6時0分
-
「アンチヒーロー」明墨(長谷川博己)の“標的”明らかに「黒幕候補?」「意外」と視聴者驚き5月19日22時3分
-
「絶対二度見してしまうww」 ムキムキのトレーナーが持つ“意外なもの”にギャップ萌えする人続出5月19日21時0分
-
本音をお伝えします。男性が「思わず触れたくなる」意外なパーツとは5月19日21時0分
-
人生で初めて「ぎょうざの満洲」に行ったら悔しさしか残らなかった5月19日19時0分