Loading article…
研究者の自由度とは、科学的実験の設計と実施、およびその結果の分析のプロセスに伴う固有の柔軟性を指す概念である。この用語は、研究者がデータを収集および分析する複数の方法から選択でき、これらの決定は恣意的に行われる場合もあれば、他の可能な選択肢とは異なり、肯定的で統計的に有意な結果を生み出すために行われる場合もあるという事実を反映している。 [1] 研究者の自由度には、自然をさまざまな角度から見る能力を与え、新しい発見や仮説を生み出すことを可能にするなど、肯定的な側面がある。[2] [3] [4]しかし、研究者の自由度は、異なる解釈や分析が当然のこととみなされるデータドレッジングやその他の疑わしい研究慣行につながる可能性がある。 [5] [6]研究者の自由度が広く使用されていることは、科学的研究における固有の方法論的限界を表しており、偽陽性の発見率の膨張に寄与している。[1]また、効果サイズの過大評価につながる可能性がある。[7]
研究者の自由度の概念は主に心理学の文脈で議論されてきたが、あらゆる科学分野に影響を与える可能性がある。[1] [8]出版バイアスと同様に、研究者の自由度の存在は、ファネルプロットの非対称性の度合いを膨らませる可能性があります。[9]また、特に社会科学や行動科学では、研究者が利用できる自由度が非常に多いため、これはpハッキングの潜在的な説明でもあります。マルチバース分析は、これらの自由度を明らかにするのに役立つ方法です。サンプルサイズの小さい研究は、研究者の自由度のバイアスの影響を受けやすくなります。[10]
例
Steegen ら (2016) は、単一の生データ セットから始めて、さまざまな合理的なデータ処理の決定を適用することで、多数の処理済みデータ セット (データ マルチバースと呼ばれる) が生成され、多くの場合、さまざまな統計結果につながる可能性があることを示しました。[11] Wicherts ら (2016) は、心理学の研究を行う際に研究者が持つ 34 の自由度 (DF) のリストを提供しました。リストされている DF は、仮説の策定から結果の報告まで、研究プロセスのすべての段階にわたります。それらには、仮説のない探索的研究の実施が含まれます。著者は、「...研究の後半の段階で以下で説明する研究者の DF の多くに浸透しています」と述べています。この論文でリストされている他の DF には、複数の操作された独立変数の作成と、後で分析のために選択される可能性のある追加の変数の測定が含まれます。[7]
参照
参考文献
- ^ abc Simmons, Joseph P.; Nelson, Leif D.; Simonsohn, Uri (2011 年 11 月). 「False-Positive 心理学: データ収集と分析における非公開の柔軟性により、何でも有意として提示できる」.心理科学. 22 (11): 1359–1366. doi :10.1177/0956797611417632. ISSN 0956-7976. PMID 22006061. S2CID 13802986.
- ^ Tukey, JW (1977).探索的データ分析 第2巻. ピアソン.
- ^ Box, George EP (1976年12月). 「科学と統計」.アメリカ統計学会誌. 71 (356): 791–799. doi :10.2307/2286841. JSTOR 2286841.
- ^ グルート、アドリアン・D・デ;グルート、アドリアヌス・ディンジマン・デ (1978)。チェスの思考と選択。心理学研究 (第 2 版)。ハーグ：ムートン。ISBN 978-90-279-7914-8。
- ^ Wicherts、Jelte M.;フェルトカンプ、クージェLS;アウグステイン、ヒルデ EM;バッカー、マルジャン。ファンアールト、ロビーCM。ヴァン・アッセン、マルセル ALM (2016)。 「心理学研究の計画、実行、分析、報告における自由度: p-ハッキングを避けるためのチェックリスト」。心理学のフロンティア。7 : 1832.土井: 10.3389/fpsyg.2016.01832。ISSN 1664-1078。PMC 5122713。PMID 27933012。
- ^ Simmons, Joseph P.; Nelson, Leif D.; Simonsohn, Uri (2011-10-17). 「False-Positive Psychology」. Psychological Science . 22 (11): 1359–1366. doi :10.1177/0956797611417632. ISSN 0956-7976. PMID 22006061. S2CID 13802986.
- ^ ab Wicherts、Jelte M.;フェルトカンプ、クージェLS;アウグステイン、ヒルデ EM;バッカー、マルジャン。ファンアールト、ロビーCM。ファン・アッセン、マルセル・ALM (2016-11-25)。 「心理学研究の計画、実行、分析、報告における自由度: p-ハッキングを避けるためのチェックリスト」。心理学のフロンティア。7 : 1832.土井: 10.3389/fpsyg.2016.01832。ISSN 1664-1078。PMC 5122713。PMID 27933012。
- ^ Coretta, Stefano; Casillas, Joseph V.; Roessig, Simon; Franke, Michael; Ahn, Byron; Al-Hoorie, Ali H.; Al-Tamimi, Jalal; Alotaibi, Najd E.; AlShakhori, Mohammed K.; Altmiller, Ruth M.; Arantes, Pablo; Athanasopoulou, Angeliki; Baese-Berk, Melissa M.; Bailey, George; Sangma, Cheman Baira A (2023年7月). 「多次元信号と分析の柔軟性：人間の音声分析における自由度の推定」.心理科学の方法と実践の進歩. 6 (3). doi : 10.1177/25152459231162567 . hdl : 2346/95600 . 2515-2459 .
- ^ Carter, Evan C.; McCullough, Michael E. (2014-07-30). 「出版バイアスと自己制御の限定的強度モデル：自我消耗の証拠は過大評価されているか？」Frontiers in Psychology . 5 : 823. doi : 10.3389/fpsyg.2014.00823 . ISSN 1664-1078. PMC 4115664. PMID 25126083 .
- ^ Schweizer, Geoffrey; Furley, Philip (2016年3月). 「スポーツと運動心理学における再現可能な研究: サンプルサイズの役割」.スポーツと運動の心理学. 23 : 114–122. doi :10.1016/j.psychsport.2015.11.005.
- ^ Steegen, Sara; Tuerlinckx, Francis; Gelman, Andrew; Vanpaemel, Wolf (2016年9月). 「マルチバース分析による透明性の向上」.心理科学の展望. 11 (5): 702–712. doi : 10.1177/1745691616658637 . ISSN 1745-6916. PMID 27694465.