調和平均p値[1] [2] [3] (HMP)は、強い意味のファミリーワイズエラー率[2]を制御する多重比較問題に対処する統計的手法です(この主張は異論があります[4])。これは、フィッシャー法[5]のように、 p値のグループが統計的に有意であるかどうかを検定することにより、複合検定を実行することでボンフェローニ補正の検出力を改善します。しかし、フィッシャー法[2]とは異なり、 p値が独立しているという制限的な仮定を回避します。[3]その結果、検定が独立している場合は検出力が低くなります(つまり、偽陰性率が高くなります)。[2]厳格なファミリーワイズエラー率を制御するボンフェローニ補正などのアプローチの代替手段を提供することに加えて、厳格でない偽発見率を制御するために広く使用されているベンジャミニ-ホッホバーグ手順(BH)の代替手段も提供します。[6]これは、HMPが有意な仮説群を検出する力は、BHが有意な個々の仮説を検出する力よりも大きいためです。[2]
この手法には 2 つのバージョンがあります: (i) HMP を近似p値として直接解釈する方法と、(ii) HMP を漸近的に正確な p 値に変換する手順です。このアプローチでは、統計的に有意なp値の最小グループを探すことができるマルチレベル テスト手順が提供されます。
調和平均の直接解釈p-価値
p値の加重調和平均はと定義されます。ここで は合計が 1 になる重み、つまり です。等しい重みを選択することもできます。その場合は です。
一般的に、HMPをp値として直接解釈することは反保守的であり、偽陽性率が予想よりも高くなることを意味します。しかし、HMPが小さくなると、特定の仮定の下では乖離が小さくなり、有意性の直接解釈では、十分に小さい値(例:)に対して示唆される偽陽性率に近い値を達成します。[2]
HMPは、が小さい場合、またはが大きい場合、の係数を超えて反保守的になることはありません。[3]しかし、これらの境界は、実際には保守的である可能性が高い任意の依存関係における最悪のシナリオを表しています。これらの境界を適用するのではなく、HMPを変換することで漸近的に正確なp値を生成することができます。
漸近的に正確な調和平均p-値手順
一般化中心極限定理によれば、漸近的に正確なp値 は、式[2] を使用してHMP から計算できます。 一般化中心極限定理の仮定に従うと、この変換されたp値は、検定回数 が大きくなるほど正確になります。計算には、密度関数が次のように表されるLandau 分布 を使用します。検定は、 R パッケージのコマンドによって実装されます。チュートリアルはオンラインで利用できます。
p.hmpharmonicmeanp
同様に、HMP を臨界値の表と比較することもできます (表 1)。表は、偽陽性率が小さいほど、またテスト数が少ないほど、臨界値が偽陽性率に近づくことを示しています。
マルチレベルテスト手順による多重テスト
HMPがp値のグループに対してあるレベルで有意である場合、強義のファミリーワイズエラー率を維持しながら、p値のすべてのサブセットを検索して最小の有意なグループを探すことができます。 [2]正式には、これはクローズドテスト手順を構成します。[7]
が小さい場合(例)、HMPの直接解釈に基づく次のマルチレベル検定は、レベルにおける強意味のファミリーワイズエラー率をおよそ
- p値の 任意のサブセットのHMPを次のように定義する。
- (ただし )の場合、サブセット内のp値はいずれも有意ではないという帰無仮説を棄却します。(定義により、 であることを思い出してください。)
上記の漸近的に正確なバージョンでは、ステップ2で を に置き換えます。ここで はサブセット 内のp値だけでなくp値の数を与えます。[8]
HMP の直接解釈の方が高速であるため、漸近的に正確な式を使用して確認することを条件として、直接解釈を使用して有意である可能性が高いp値のサブセットを識別するために2 パス手順を使用できます。
HMPの特性
HMPは一般化された中心極限定理[2]から生じるさまざまな特性を持っています 。
- p値間の正の依存関係に対して堅牢です。
- テストの正確な数Lには影響されません。
- 重みwの分布に対して堅牢です。
- 最も小さいp値の影響を最も受けます。
HMP が有意でない場合は、構成テストのサブセットも有意ではありません。逆に、マルチレベル テストでp値のサブセットが有意であると判断された場合、すべてのp値を組み合わせた HMP は有意である可能性が高くなります。これは、HMP を直接解釈した場合に確実です。目標が個々の p値の有意性を評価することであり、 p値のグループに関する組み合わせテストは重要でない場合、HMP はBonferroni手順と同等ですが、より厳格な有意性しきい値が適用されます(表 1)。
HMP では、帰無仮説が真である場合、個々のp値が (必ずしも独立ではない)標準一様分布に従うと仮定します。したがって、検出力の低い検定が多数あると、HMP の検出力が損なわれる可能性があります。
重みの選択は帰無仮説の下でのHMPの妥当性には重要ではないが、重みは手順の検出力に影響する。[2]の補足方法§5Cとオンラインチュートリアルでは、この問題についてさらに詳しく検討している。
HMPのベイズ解釈
HMPはベイズモデルの平均化に類似して考案され、尤度比検定からのp値を組み合わせるとモデル平均ベイズ係数に反比例すると解釈できる。[1] [2]
調和平均の経験則
IJ Good は、ベイズ係数と尤度比検定のp値との間の経験的関係を報告しました。 [1]より一般的な対立仮説にネストされた帰無仮説について、彼は、 が を支持するベイズ係数を表す場合が多いことに気付きました。外挿では、共通の帰無仮説を持つ一連の検定について、HMP がモデル平均ベイズ係数に反比例するとする経験則を提案しました。Goodにとって、彼の経験則は、仮説検定に対するベイズ流アプローチと古典的アプローチの互換性を支持しました。[9] [10] [11] [12] [13]
ベイズ較正p-値
対立仮説におけるp値の分布がパラメータを持つベータ分布に従う場合、これはSellke、Bayarri、Berger [14]によって検討された形式であり、モデル平均ベイズ因子とHMPの間の反比例関係は次のように定式化できる[2] [15]。ここで
- 対立仮説の事前確率であり、
- 対立仮説における期待値である
- p値に割り当てられた重み
- 事前モデルの確率と累乗を重みに組み込み、
- 重みを正規化します。
この近似は、十分な検出力のあるテスト()で最もよく機能します。
調和平均pベイズ係数の境界値としての値
自由度がちょうど 2 の尤度比検定の場合、ウィルクスの定理によれば、 は対立仮説を支持する最大尤度比であり、したがっては重み を使用した加重平均最大尤度比です。 はベイズ因子の上限であるため、 はモデル平均ベイズ因子の上限です。この等価性は自由度が 2 の場合にのみ成立しますが、との関係は他の自由度でも同様に動作します。[2]
対立仮説におけるp値の分布はパラメータ付きベータ分布に従い、HMPの重みはモデル平均ベイズ係数のより厳しい上限を提供するという仮定の下では、グッドの経験的関係の反比例関係を再び再現する結果となる。[16]
参考文献
- ^ abc Good, IJ (1958). 「並列および直列の有意性検定」アメリカ統計学会誌53 ( 284): 799–813. doi :10.1080/01621459.1958.10501480. JSTOR 2281953.
- ^ abcdefghijklmn Wilson, DJ (2019). 「従属検定 を組み合わせる場合の調和平均p値」。米国科学アカデミー紀要。116 (4): 1195–1200。doi : 10.1073 / pnas.1814092116。PMC 6347718。PMID 30610179。
- ^ abc Vovk, Vladimir ; Wang, Ruodu (2019年4月25日). 「平均化によるp値の結合」(PDF) .ランダムな世界におけるアルゴリズム学習.
- ^ Goeman, Jelle J.; Rosenblatt, Jonathan D.; Nichols, Thomas E. (2019-11-19). 「調和平均p値:強い制御と弱い制御、そして独立性の仮定」。米国 科学アカデミー紀要。116 ( 47): 23382–23383。doi : 10.1073 / pnas.1909339116。ISSN 0027-8424。PMC 6876242。PMID 31662466。
- ^ Fisher, RA (1934).研究者のための統計手法(第5版). エディンバラ、イギリス: Oliver and Boyd.
- ^ Benjamini Y, Hochberg Y (1995). 「偽発見率の制御: 多重検定への実用的かつ強力なアプローチ」. Journal of the Royal Statistical Society. シリーズ B (方法論) . 57 (1): 289–300. doi :10.1111/j.2517-6161.1995.tb02031.x. JSTOR 2346101.
- ^ Marcus R、Eric P、 Gabriel KR (1976)。 「順序付き分散分析を特に考慮したクローズドテスト手順について」。Biometrika。63 ( 3 ): 655–660。doi :10.1093/biomet/63.3.655。JSTOR 2335748。
- ^ Wilson, Daniel J (2019年8月17日). 「「独立したテストを組み合わせるための調和平均p値」の訂正を更新しました」(PDF)。
- ^ Good, IJ (1984). 「C192. 片側と両側、そして調和平均の経験則」.統計計算とシミュレーションジャーナル. 19 (2): 174–176. doi :10.1080/00949658408810727.
- ^ Good, IJ (1984). 「C193. 対比較と非対比較および調和平均の経験則」.統計計算およびシミュレーションジャーナル. 19 (2): 176–177. doi :10.1080/00949658408810728.
- ^ Good, IJ (1984). 「C213. 試験を「並行して」組み合わせるための調和平均法則の明確化「統計計算とシミュレーションジャーナル.20 ( 2):173–176.doi :10.1080/00949658408810770.
- ^ Good, IJ (1984). 「C214. 調和平均の経験則: いくつかの応用例」.統計計算およびシミュレーションジャーナル. 20 (2): 176–179. doi :10.1080/00949658408810771.
- ^ グッド、アーヴィング・ジョン。(2009)。良い思考:確率の基礎とその応用。ドーバー出版。ISBN 9780486474380. OCLC 319491702.
- ^ Sellke, Thomas; Bayarri, M. J; Berger, James O (2001). 「正確な帰無仮説をテストするためのp値の較正」.アメリカ統計学者. 55 (1): 62–71. doi :10.1198/000313001300339950. ISSN 0003-1305. S2CID 396772.
- ^ Wilson, DJ (2019). 「Held への返答: 調和平均 p 値がベイズ係数となるのはいつですか?」(PDF) . Proceedings of the National Academy of Sciences USA . 116 (13): 5857–5858. doi : 10.1073/pnas.1902157116 . PMC 6442550 . PMID 30890643.
- ^ Held , L (2019). 「調和平均p値のベイズ解釈について」。米国科学アカデミー紀要。116 (13): 5855–5856。doi : 10.1073 / pnas.1900671116。PMC 6442579。PMID 30890644。
