統計学において、ワルド検定(アブラハム・ワルドにちなんで名付けられた)は、帰無仮説の下での無制限推定値とその仮説値との間の重み付き距離に基づいて統計パラメータの制約を評価し、重みは推定値の精度である。 [1] [2]直感的には、この重み付き距離が大きいほど、制約が真である可能性は低くなる。ワルド検定の有限サンプル分布は一般に不明であるが、[3] : 138 帰無仮説の下で漸近的なχ 2分布を持ち、この事実を使用して統計的有意性を判断できる。[4]
ラグランジュ乗数検定および尤度比検定とともに、ワルド検定は仮説検定の 3 つの古典的なアプローチの 1 つです。ワルド検定が他の 2 つより優れている点は、制約のないモデルの推定のみを必要とするため、尤度比検定に比べて計算負荷が軽減されることです。ただし、大きな欠点は (有限サンプルでは) 帰無仮説の表現の変化に対して不変ではないことです。言い換えれば、非線形パラメータ制約の代数的に同等な式により、検定統計量の値が異なる可能性があります。 [5] [6]これは、ワルド統計量がテイラー展開から導出されるためであり、[7]同等の非線形式の書き方が異なると、対応するテイラー係数に重要な違いが生じます。[8]もう一つの異常現象であるハウク・ドナー効果[9]は、推定された(制約のない)パラメータがパラメータ空間の境界に近い場合、例えば近似確率が0または1に極めて近い場合に二項モデルで発生する可能性があり、その結果、ワルド検定は制約のないパラメータと制約のあるパラメータ間の距離が単調に増加しなくなります。 [10] [11]
数学的な詳細
Wald 検定では、制約のない尤度関数の最大化引数として見つかった推定値が、仮説値 と比較されます。特に、差の二乗は、対数尤度関数の曲率によって重み付けされます。
単一のパラメータでテストする
仮説に単一のパラメータ制限のみが含まれる場合、Wald 統計は次の形式になります。
これは帰無仮説の下では自由度1の漸近的χ 2分布に従う。単一制限ワルド統計量の平方根は(疑似)t比として理解できるが、正規分布誤差を伴う線型回帰の特殊な場合を除いて、実際にはt分布しない。[12]一般に、漸近的z分布に従う。[13]
ここで、 は最大尤度推定値(MLE) の標準誤差(SE) 、つまり分散の平方根です。有限サンプルで分散行列を一貫して推定する方法はいくつかあり、標準誤差と関連する検定統計量およびp値の代替推定値につながります。[3] : 129 のMLE推定量をSEにプラグインした後でも漸近的に正規分布が得られるという妥当性は、スラツキーの定理に依存しています。
複数のパラメータのテスト
Wald 検定は、複数のパラメータで単一の仮説を検定する場合だけでなく、単一/複数のパラメータで複数の仮説を共同で検定する場合にも使用できます。 をPパラメータのサンプル推定値(つまり、はベクトル) とします。これは、共分散行列V、を持つ正規分布に漸近的に従うと想定されます。 Pパラメータに対するQ仮説の検定は、行列 Rで表されます。
帰無仮説の下での検定統計量の分布は
それはつまり
ここで共分散行列の推定値である。[14]
非線形仮説
標準形式では、ワルド検定は単一の行列 Rで表すことができる線形仮説を検定するために使用されます。次の形式の非線形仮説を検定したい場合:
検定統計量は次のようになります。
ここで、 はサンプル推定値で評価された c の導関数です。この結果は、分散の一次近似を使用する デルタ法を使用して得られます。
再パラメータ化に対する不変性
分散の近似値を使用するという事実は、ワルド統計量が仮説の非線形変換/再パラメータ化に対して不変ではないという欠点がある。つまり、質問の表現方法によっては、同じ質問に対して異なる答えが得られる可能性がある。[15] [5]たとえば、R = 1かどうかを尋ねることは、log R = 0 かどうかを尋ねることと同じです が、R = 1のワルド統計量は、log R = 0 のワルド統計量と同じではありません (一般に、 Rとlog R の標準誤差の間には明確な関係がないため、近似値にする必要があるためです)。[16]
ワルドテストの代替
ワルド検定の代替として、尤度比検定やラグランジュ乗数検定(スコア検定とも呼ばれる)などがある。ロバート・F・エングルは、ワルド検定、尤度比検定、ラグランジュ乗数検定の3つの検定 が漸近的に同等であることを示した。[17]これらは漸近的に同等であるが、有限のサンプルでは、異なる結論につながるほど相違する可能性がある。
尤度比検定やラグランジュ乗数をワルド検定よりも優先する理由はいくつかある。[18] [19] [20]
- 非不変性: 上で述べたように、ワルド検定は再パラメータ化に対して不変ではないが、尤度比検定はR、log R 、またはRの他の単調変換の いずれを使用してもまったく同じ答えを出す。[5]
- もう 1 つの理由は、ワルド検定では 2 つの近似値 (標準誤差またはフィッシャー情報と最大尤度推定値がわかっている) が使用されるのに対し、尤度比検定では帰無仮説と対立仮説の下での尤度関数の比のみに依存することです。
- ワルド検定では、最大化引数を用いた推定値が必要であり、これは「完全」モデルに対応する。場合によっては、帰無仮説の下ではモデルが単純になるため、スコア検定(ラグランジュ乗数検定とも呼ばれる)を使用する方がよい場合もある。スコア検定は、最大化要素の変動を推定するのが難しい場合や、最大尤度推定量に従って推定値を計算するのが難しい場合に定式化できるという利点がある。たとえば、コクラン・マンテル・ヘンツェル検定はスコア検定である。[21]
参照
参考文献
- ^ Fahrmeir, Ludwig; Kneib, Thomas; Lang, Stefan; Marx, Brian (2013). 回帰: モデル、方法、アプリケーション。ベルリン: Springer。p. 663。ISBN 978-3-642-34332-2。
- ^ Ward, Michael D. ; Ahlquist, John S. (2018). 社会科学のための最大尤度:分析戦略。ケンブリッジ大学出版局。p. 36。ISBN 978-1-316-63682-4。
- ^ ab Martin, Vance; Hurn, Stan; Harris, David (2013). 時系列による計量経済モデリング: 仕様、推定、テスト。ケンブリッジ大学出版局。ISBN 978-0-521-13981-6。
- ^ Davidson, Russell; MacKinnon, James G. (1993). 「最大尤度法: 基本概念と表記法」。計量経済学における推定と推論。 ニューヨーク: Oxford University Press。 p. 89。ISBN 0-19-506011-3。
- ^ abc Gregory, Allan W.; Veall, Michael R. (1985). 「非線形制約のワルド検定の定式化」Econometrica . 53 (6): 1465–1468. doi :10.2307/1913221. JSTOR 1913221.
- ^ Phillips, PCB ; Park, Joon Y. (1988). 「非線形制約の Wald テストの定式化について」(PDF) . Econometrica . 56 (5): 1065–1083. doi :10.2307/1911359. JSTOR 1911359.
- ^ 林文夫(2000). 計量経済学. プリンストン: プリンストン大学出版局. pp. 489–491. ISBN 1-4008-2383-8。、
- ^ Lafontaine, Francine; White, Kenneth J. (1986). 「任意のWald統計値を取得する」. Economics Letters . 21 (1): 35–40. doi :10.1016/0165-1765(86)90117-5.
- ^ Hauck, Walter W. Jr.; Donner, Allan (1977). 「ロジット分析における仮説へのWald検定の適用」アメリカ統計学会誌. 72 (360a): 851–853. doi :10.1080/01621459.1977.10479969.
- ^ King, Maxwell L.; Goh, Kim-Leng (2002). 「Wald テストの改良」。応用計量経済学と統計的推論ハンドブック。ニューヨーク: Marcel Dekker。pp. 251–276。ISBN 0-8247-0652-8。
- ^ Yee, Thomas William (2022) . 「Wald 検定における Hauck–Donner 効果について: 検出、転換点、パラメータ空間の特性評価」。アメリカ統計学会誌。117 ( 540 ) : 1763–1774。arXiv : 2001.08431。doi : 10.1080/01621459.2021.1886936 。
- ^ Cameron, A. Colin ; Trivedi, Pravin K. (2005). Microeconometrics : Methods and Applications. ニューヨーク: Cambridge University Press. p. 137. ISBN 0-521-84805-9。
- ^ Davidson, Russell; MacKinnon, James G. (1993). 「最大尤度法: 基本概念と表記法」。計量経済学における推定と推論。 ニューヨーク: Oxford University Press。 p. 89。ISBN 0-19-506011-3。
- ^ Harrell, Frank E. Jr. (2001). 「セクション 9.3.1」.回帰モデリング戦略. ニューヨーク: Springer-Verlag. ISBN 0387952322。
- ^フィアーズ、トーマス ・R.、ベニシュー、ジャック、ゲイル、ミッチェル・H. (1996)。「ワルド統計の誤りやすさのリマインダー」アメリカ統計学者。50 (3): 226–227。doi :10.1080/00031305.1996.10474384。
- ^ Critchley, Frank; Marriott, Paul; Salmon, Mark (1996). 「非線形制約条件付き Wald テストの微分幾何学について」. Econometrica . 64 (5): 1213–1222. doi :10.2307/2171963. hdl : 1814/524 . JSTOR 2171963.
- ^ Engle, Robert F. (1983)。「計量経済学におけるワルド、尤度比、ラグランジュ乗数検定」。Intriligator, MD; Griliches, Z. (編)。計量経済学ハンドブック。第 2 巻。Elsevier。pp. 796–801。ISBN 978-0-444-86185-6。
- ^ Harrell, Frank E. Jr. (2001). 「セクション 9.3.3」.回帰モデリング戦略. ニューヨーク: Springer-Verlag. ISBN 0387952322。
- ^ コレット、デイビッド(1994)。医療研究における生存データのモデリング。ロンドン:チャップマン&ホール。ISBN 0412448807。
- ^ パウィタン、ユディ(2001)。In All Likelihood。ニューヨーク:オックスフォード大学出版局。ISBN 0198507658。
- ^ アグレスティ、アラン (2002)。カテゴリーデータ分析(第 2 版)。Wiley。p. 232。ISBN 0471360937。
さらに読む
- グリーン、ウィリアム H. (2012)。計量経済分析(第 7 国際版)。ボストン: ピアソン。pp. 155–161。ISBN 978-0-273-75356-8。
- クメンタ、ヤン(1986)。『計量経済学の要素』(第2版)。ニューヨーク:マクミラン。pp. 492–493。ISBN 0-02-365070-2。
- Thomas, RL (1993).入門計量経済学: 理論と応用(第2版). ロンドン: ロングマン. pp. 73–77. ISBN 0-582-07378-2。
外部リンク
- 数学用語の最も古い使用例に関するワルドテスト
