一般線型モデルまたは一般多変量回帰モデルは、複数の多重線型回帰モデルを同時に記述するコンパクトな方法です。その意味では、独立した統計線型モデルではありません。さまざまな多重線型回帰モデルは、 [1]のようにコンパクトに記述できます。
ここで、Yは一連の多変量測定値を含む行列(各列は従属変数の 1 つに関する測定値のセット)、Xは独立変数に関する観測値の行列(設計行列の可能性がある)、B は通常推定されるパラメータを含む行列、Uは誤差(ノイズ)を含む行列です。 誤差は通常、測定値間で相関がないと想定され、多変量正規分布に従います。 誤差が多変量正規分布に従わない場合は、一般化線型モデルを使用して、 YとUに関する仮定を緩和することができます。
一般線型モデルには、ANOVA、ANCOVA、MANOVA、MANCOVA、通常の線型回帰、t検定、F検定など、さまざまな統計モデルが組み込まれています。一般線型モデルは、多重線型回帰を複数の従属変数の場合に一般化したものです。Y 、B、Uが列ベクトルである場合、上記の行列方程式は多重線型回帰を表します。
一般線形モデルによる仮説検定は、多変量検定または複数の独立した単変量検定の 2 つの方法で行うことができます。多変量検定では、Yの列は一緒に検定されますが、単変量検定では、 Yの列は独立して、つまり、同じ設計マトリックスを持つ複数の単変量検定として検定されます。
多重線形回帰との比較
多重線形回帰は、複数の独立変数がある場合の単純線形回帰の一般化であり、従属変数が1つに限定された一般線形モデルの特殊なケースです。多重線形回帰の基本モデルは、
- あるいはもっと簡潔に
各観測値i = 1, ... , nについて。
上記の式では、 1 つの従属変数とp 個の独立変数のn 個の観測値を考慮します。したがって、Y iは従属変数のi番目の観測値、 X ikはk番目の独立変数のk番目の観測値( j = 1、2、...、p)です。値β j は推定されるパラメータを表し、ε i はi番目の独立した同一分布正規誤差 です。
より一般的な多変量線形回帰では、同じ説明変数セットを共有し、したがって互いに同時に推定される m > 1の従属変数ごとに、上記の形式の方程式が 1 つあります。
- あるいはもっと簡潔に
i = 1, ... , nとしてインデックス付けされたすべての観測値と、 j = 1, ... , mとしてインデックス付けされたすべての従属変数について。
各従属変数には適合すべき独自の回帰パラメータ セットがあるため、計算の観点からは、一般的な多変量回帰は、同じ説明変数を使用する標準的な多重線形回帰のシーケンスにすぎないことに注意してください。
一般化線形モデルとの比較
一般線型モデルと一般化線型モデル(GLM)[2] [3]は、いくつかの連続予測変数および/またはカテゴリ予測変数を単一の結果変数に関連付けるために一般的に使用される2つの統計的手法ファミリーです。
2つのアプローチの主な違いは、一般線型モデルでは残差が条件付き 正規分布に従うと厳密に仮定するのに対し、[4] GLMではこの仮定を緩め、残差に対して指数族からのさまざまな他の分布を許容することです。[2]注目すべきは、一般線型モデルはGLMの特殊なケースであり、残差の分布が条件付き正規分布に従うことです。
残差の分布は、結果変数の種類と分布に大きく依存します。結果変数の種類が異なると、GLM ファミリー内のモデルも多様化します。GLM ファミリーでよく使用されるモデルには、バイナリまたは二値結果用のバイナリ ロジスティック回帰[5] 、カウント結果用のポアソン回帰[6]、連続的で正規分布する結果用の線形回帰などがあります。つまり、GLM は一般的な統計モデル ファミリーとして、または特定の結果タイプ用の特定のモデルとして語られることがあります。
アプリケーション
一般線形モデルの応用は、科学実験における複数の脳スキャンの分析に見られる。Yには脳スキャナーからのデータ、Xには実験設計変数と交絡因子が含まれる。これは通常、単変量法(この設定では通常、マス単変量と呼ばれる)でテストされ、統計的パラメトリックマッピングと呼ばれることが多い。[12]
参照
注記
- ^ KV Mardia 、 JT Kent 、JM Bibby (1979)。多変量解析。Academic Press。ISBN 0-12-471252-5。
- ^ ab McCullagh, P.; Nelder, JA (1989)、「一般化線形モデルの概要」、一般化線形モデル、Springer US、pp. 21–47、doi :10.1007/978-1-4899-3242-6_2、ISBN 9780412317606
- ^ Fox, J. (2015).応用回帰分析と一般化線形モデル. Sage Publications.
- ^ Cohen, J., Cohen, P., West, SG, & Aiken, LS (2003). 行動科学のための応用多重回帰/相関分析。
- ^ Hosmer Jr, DW, Lemeshow, S., & Sturdivant, RX (2013).応用ロジスティック回帰(Vol. 398). John Wiley & Sons.
- ^ Gardner, W.; Mulvey, EP; Shaw, EC (1995). 「カウントとレートの回帰分析: ポアソン、過分散ポアソン、負の二項モデル」心理学速報. 118 (3): 392–404. doi :10.1037/0033-2909.118.3.392. PMID 7501743.
- ^ McCullagh, Peter ; Nelder, John (1989).一般化線型モデル、第 2 版。ボカラトン: Chapman and Hall/ CRC。ISBN 978-0-412-31760-6。
- ^ LinearModelFit、Wolfram言語ドキュメントセンター。
- ^ GeneralizedLinearModelFit、Wolfram言語ドキュメントセンター。
- ^ ls、EViews ヘルプ。
- ^ glm、EViews ヘルプ。
- ^ KJ Friston; AP Holmes; KJ Worsley; J.-B. Poline; CD Frith; RSJ Frackowiak (1995). 「機能イメージングにおける統計的パラメトリックマップ: 一般的な線形アプローチ」.ヒューマン・ブレイン・マッピング. 2 (4): 189–210. doi :10.1002/hbm.460020402. S2CID 9898609.
参考文献
- クリステンセン、ロナルド(2020)。複雑な質問への平面的な答え:線形モデルの理論(第5版)。ニューヨーク:シュプリンガー。ISBN 978-3-030-32096-6。
- Wichura, Michael J. (2006).線形モデルへの座標フリーアプローチ。ケンブリッジ統計および確率数学シリーズ。ケンブリッジ: ケンブリッジ大学出版局。pp. xiv+ 199。ISBN 978-0-521-86842-6. MR 2283455。
- ローリングス、ジョン・O. 、パントゥラ、サストリー・G.、ディッキー、デビッド・A.、編(1998)。応用回帰分析。Springer Texts in Statistics。doi :10.1007/b98890。ISBN 0-387-98454-2。
