心理学研究における再現性の欠如とはどういう意味ですか?

先週、心理学研究で発見された結果を再現するための世界最大の取り組みの結果が届きました。ブライアンノセックの再現性プロジェクトは、わずか3つの主要な心理学ジャーナルから2008年に発表された100の心理学実験の結果を調べました。彼らはどのような結果が得られるかを見るために調査を再現しようとしました。

理想的な世界では、研究の75%または80%のオーダーでも同様の結果が再現されているはずだと思いますか?新しい研究は、元の研究者の方法に注意深く従った研究者によって、異なる集団で単に再実施されたからです。ほとんどの場合、研究者はまた、最初の研究者から直接連絡と協力を得ていました。

しかし、先週の出版以来、さまざまな方法で発見された調査結果がありました 理科 ジャーナルは、プロジェクトは75%に近いどこにも来なかった。最初の100件の研究の97%と比較して、複製の36%だけが重要な結果をもたらしました。

これは心理学にとって何を意味しますか?

この発見を思いがけないものや「以前ほど悪くないもの」ではないものに変えようとする人もいますが、これは心理学の前兆ではありません。毎月、何百もの新しい心理学研究が発表されています。この調査結果の意味するところは、一言で言えば、それらの研究の調査結果のほとんどは信頼できないということです。それらは事実上、誤りです。

から 大西洋の カバレッジ:

「成功率は私が思っていたよりも低いです」とスタンフォード大学のジョンイオアニディスは言います。 ほとんどの公開された研究結果が間違っている理由 再現運動のための避雷針です。

「私の予測の一部が検証されているのを見るのは残念です。彼らが間違っていたことが証明されていればいいのに」

新しい研究からのもう1つの悪い発見は、測定された効果のサイズが通常、元の研究者が見つけたものよりも50%小さいことです。つまり、結果が新しい研究者によって再現された場合でも、研究されている変数の影響は当初考えられていたほど重要ではありませんでした。

心理学研究の再現性が悪い理由

この貧しい人々が心理学の研究で示した理由は十数通りあります。しかし、それらのいくつかを検討する前に、これは単一の研究から結果を取り、それらから一般化する際の現実の水の冷たい水しぶきです。またはさらに悪いことに、1つ以上の研究でまだ真実であると示されていないときに何かが真実であると信じること。

研究が二重盲検でなかった場合-ほとんどがそうであったように-研究者自身のバイアスがデータの収集または分析方法に微妙に影響を与える可能性があります。研究者が重要な結果を見つけるためだけに8か18か月間データを収集したばかりの場合、データ釣りの遠征に出て、公開できる他のデータ関係を見つけることができます。1研究者は、元の仮説を実際のデータに合わせて変更します見つかりました(ほとんどの研究者はまだ追跡サービスに彼らの研究を事前登録していません-それはゆっくりと変化していますが)。

他の人たちは、おそらく「意外性」がもう1つの説明であると示唆しています。今日のジャーナルは、読者にとってより人気があり興味深いので、意外な発見の公開に焦点を当てています。平均に回帰の可能性を追加すると、変数は最初に測定されたときに最も極端になる可能性がありますが、2回または3回測定されたときにそれほど極端ではない可能性があります。再現する。

心理学にとってそれはどういう意味ですか?

人間の本性は無限に複雑です。心理学は全体をよりよく理解するために人間の行動と感情を小さな断片に分解しようとします。ただし、研究が研究の背後にある科学を再現できない場合は、フィールドが毎年発行するものの多くも信頼できないことを示唆しています。

ただし、他の分野でこれまでに再現性プロジェクトが試みられたことはないため、ほとんどの科学の再現性統計もわかりません。これは、ほとんどの科学で受けた欠陥か、他の科学よりも社会科学に影響を与える欠陥である可能性があります。

しかし、短期的には、これは私がいつも言ってきたことを強調します。心理学の発見は、別の研究者によって再現されるまであなたが帽子をかぶることができるものではありません。再現できる所見は「堅牢」であると言われ、信頼されています。

新しい研究に基づいてニュース記事を評価または読むときは、この種の情報を探してください。新しい「意外な」発見ほどセクシーではありませんが、私たちがすでに知っていると私たちが考えていることを検証または疑問視する研究も同様に重要です。

詳細については…

大西洋:心理学研究はどれほど信頼できるか?

ガーディアン:研究により、心理学実験結果の妥当性について厳しい評決が下される

マインドハック:それをカムバックと呼ばないでください

参照

オープンサイエンスコラボレーション。 (2015)。心理学の再現性を推定する。 科学、28歳.

再現性プロジェクト:心理学–生データ

脚注:

  1. そうでなければ、その間ずっと、お金と努力が無駄になりました。 [↩]
  2. そしてそれは、最近の心理学研究のほぼすべてのディスカッションセクションに見られる、彼らの発見の適用可能性についてなされた作者の幅広い一般化を本当に呼び起こします。 [↩]

!-- GDPR -->