グッドハートの法則は、「尺度が目標になると、それは良い尺度ではなくなる」とよく言われる格言である。 [1]この法則は、1975年に英国の金融政策に関する論文でこの格言の核となる考え方を表現したとされる英国の経済学者 チャールズ・グッドハートにちなんで名付けられた。 [2]
観察される統計的規則性は、制御目的で圧力が加えられると崩壊する傾向がある。[3]
この法則は、イギリスのサッチャー政権が広義通貨と狭義通貨の目標に基づいて金融政策を実施しようとしたことを批判するために使われたが[4]、この法則はより一般的な現象を反映している。[5]
優先順位と背景
この考えに関連する概念は数多くあるが、少なくともそのうちの 1 つはグッドハートの発言より古い。[6]注目すべきことに、ジェフ・ロダマーが主張しているように、キャンベルの法則は1969 年にさかのぼるさまざまな定式化があるため、おそらく先行している。 [7]当時、他の学者も同様の洞察を持っていた。ジェローム・ラベッツの 1971 年の著書「科学的知識とその社会的問題」 [8]もグッドハートより古いが、同じ法則を定式化していない。彼は、システム一般がどのようにゲーム化されるかを論じ、タスクの目標が複雑、洗練されている、または微妙な場合に焦点を当てている。そのような場合、タスクを適切に実行するスキルを持つ人は、割り当てられたタスクを犠牲にして自分の目標を追求します。目標が測定基準として具体化されると、これはグッドハートとキャンベルの主張と同等と見なすことができます。
グッドハートの出版後まもなく、ルーカス批判(1976年)など、他の人たちも密接に関連した考えを示唆した。経済学に応用される場合、この法則は合理的期待の概念にも暗黙的に含まれており、これは報酬と罰のシステムを認識している人々は、そのシステム内で行動を最適化して望ましい結果を達成するという経済学の理論である。たとえば、従業員が毎月販売した車の数に応じて報酬を得る場合、損失が出てもより多くの車を販売しようとするだろう。
この法則は市場の反応という文脈で生まれたが、組織における高位のターゲットの選択に深い影響を与えている。[3] ジョン・ダニエルソンは次のように述べている。
いかなる統計的関係も、政策目的で使用されると崩壊します。
そして、金融リスクモデリングで使用するための帰結を提案しました。
リスクモデルは規制目的で使用すると機能しなくなります。[9]
マリオ・ビアジョーリは、この概念を、科学出版物の重要性を推定するために引用影響度指標を使用することの結果と関連付けました。 [10] [11]
科学的評価のあらゆる指標は、必ず悪用される。グッドハートの法則は、経済の特徴が経済指標として選ばれると、人々がそれを悪用し始めるため、その指標としての機能は必然的に失われる、と述べている。
一般化
その後の著者たちは、グッドハートの金融政策に関する論点を、会計および評価システムにおける尺度と目標に関するより一般的な格言に一般化しました。1996 年に出版された書籍の章で、キース・ホスキンは次のように書いています。
「グッドハートの法則」 ― 目標となるすべての手段は悪い手段になる ― は、残念ながら、私たちの時代の最も重要な法則の 1 つとして容赦なく認識されつつあります。残念なことに、この意図しない結果の法則は避けられないように思われます。しかし、それは近代の発明である説明責任の必然的な帰結であるため、避けられないのだと思います。[12]
1997 年にホスキンらによる財務会計と教育の成績に関する研究に応えた論文で、人類学者のマリリン・ストラザーンはグッドハートの法則を「尺度が目標になると、それは良い尺度ではなくなる」と表現し、その考えを 1800 年代のイギリスにまで遡る会計の歴史と結び付けました。
尺度が目標になると、それは良い尺度ではなくなる。2.1 試験の成績が期待値になるほど、個々の成績を判別する尺度としての価値は低下する。ホスキンはこれを「グッドハートの法則」と表現している。グッドハートの金銭管理の手段に関する観察から、金銭の柔軟性のための他の手段を発明する必要が生じた。しかし、測定可能と思われる目標は、改善のための魅力的な手段となる。改善を相応の増加に結び付けると、幅広く応用できる実践が生まれた。ホスキンの見解では、定量化可能な筆記試験の手法と並んで、「ある」と「あるべき」の融合が、説明責任という近代主義の発明につながった。これは、1800 年頃に英国で初めて「説明責任というひどい考え」として表現された (文献 3、268 ページ)。[1]
例
- 研究評価に関するサンフランシスコ宣言 – 2012年、科学者の研究を評価するためにジャーナルのインパクトファクターを使用することに反対する宣言。この声明は科学におけるいくつかの問題を非難しており、グッドハートの法則が説明するように、その1つは測定が標的になっていることである。h指数の普及以来、 h指数と科学賞の相関関係は低下している。[13]
- 国際自然保護連合の絶滅の尺度は環境保護を排除するために使用できるため、IUCNは絶滅したものとして分類する際により保守的になった。[14] [15]
- 医療においては、指標の誤った適用は悪い結果につながる可能性があります。例えば、入院期間(LOS)を短縮しようと努力している病院は、誤って患者を早期退院させてしまい、緊急再入院の増加につながる可能性があります。[16]
- How to Read Numbersによると、この法律は英国政府が1日あたり10万件のCOVID-19検査という目標を発表した際にCOVID-19パンデミックへの対応に適用された。当初は実際に実施された検査の目標であり、後に検査の最大実施能力の目標となった。政府が目標を達成したと発表した際に報告された有用な診断検査の数は、はるかに少なかった。[17]
- HBOのテレビ番組「ザ・ワイヤー」で、ローランド・「プレズボ」・プリズビレフスキーは、公立学校のテスト対策の方針と、犯罪統計を「統計をごまかす」ことで犯罪統計を改善することの間に類似点を見出している。彼は、どちらも、標準テストのスコアと報告された犯罪率という効果のない指標に迎合しているため、学習と公共の安全の実質的な改善には効果がない戦略の例であると指摘している。[18]
参照
- キャンベルの法則 – 歪んだインセンティブに関する格言 – 「社会的な意思決定に定量的な社会指標が使用されるほど、腐敗の圧力にさらされる可能性が高くなります。」
- コブラ効果 – 逆の結果をもたらすインセンティブ– 問題を解決するために設計されたインセンティブが、問題を悪化させた人々に報酬を与える結果になる場合
- 確証バイアス – 既存の態度を確証するバイアス – 自分の以前の信念を確証または支持する情報を探して思い出す傾向
- ホーソン効果 – 観察されることで行動が変化する社会現象 – 人々が観察されているという認識に応じて行動の側面を修正する
- システムのゲーム化 - 法哲学の概念- 望ましい結果を得るためにルールと手順を操作する
- ルーカス批判 - 1970年代の経済思想におけるパラダイムシフト。アメリカの経済学者ロバート・ルーカスにちなんで名付けられた。経済政策の変更の影響を、過去のデータに見られる関係性だけに基づいて予測しようとするのはナイーブである。
- マクナマラの誤謬- 数値指標のみに基づいた誤った推論 - 定量的な観察(または指標) のみに基づいて決定を下し、他のすべてを無視すること。
- 指標への固執 – 意思決定者が特定の指標に過度に重点を置く傾向
- モデルの崩壊 – 合成データでトレーニングされた AI モデルの劣化
- 過剰適合 – 数学的モデリングの欠陥 – 特定のデータセットに近すぎる、または正確すぎる分析
- ピーター原則 - ローレンス・J・ピーターによる経営概念 - 個人は、新しい役職の役割ではなく、以前の役職での成功に基づいて昇進します。
- 再帰性(社会理論) - 原因と結果の循環的な関係
- 具象化(誤謬) - 抽象的なものをあたかも現実のものであるかのように扱う誤謬
- 地図と領土の関係 - オブジェクトとそのオブジェクトの表現との関係- 「地図は領土ではない」という引用で表現されることもあります。これは、何かのモデルが、モデル化されている実際のものとまったく同じであるかのように扱われる、物象化の誤謬の一種です。グッドハートの法則は、地図と領土の問題のサブセットに対処します。
- 仕様ゲーミング - 人工知能コンセプト
- 代理 – 心理的現象。構成概念をその測定値に置き換えること。ビジネスにおいては、関心のある構成概念の測定値がその構成概念に取って代わるようになる。
- 不確定性原理 – 量子物理学の基本原理 – ある側面をより正確に測定しようとすると、その試みは別の側面の測定可能性に影響を与える
参考文献
- ^ ab Strathern, Marilyn (1997). 「評価の改善: 英国大学システムにおける監査」. European Review . 5 (3). John Wiley & Sons : 305–321. doi :10.1002/(SICI)1234-981X(199707)5:3<305::AID-EURO184>3.0.CO;2-4. S2CID 145644958.
- ^ グッドハート、チャールズ(1975)。「金融管理の問題: 英国の経験」。金融経済学論文集。金融経済学論文集 1975; 1; 1. - [シドニー]。 - 1975、p. 1-20。第 1 巻。シドニー: オーストラリア準備銀行。
- ^ ab グッドハート、チャールズ(1975年)。「金融管理の問題:英国の経験」。Courakis、アンソニーS(編)『西側諸国におけるインフレ、不況、経済政策』。ニュージャージー州トトワ:バーンズアンドノーブルブックス(1981年出版)。116ページ。ISBN 0-389-20144-8。
- ^ スミス、デイビッド(1987年)。マネタリズムの興隆と衰退。ロンドン:ペンギンブックス。ISBN 9780140227543。
- ^ マンハイム、デイビッド、ガラブラント、スコット(2018)。「グッドハートの法則の変種の分類」arXiv:1803.04585 [cs.AI]。
- ^ Manheim, David (2016 年 9 月 29 日). 「Overpowered Metrics Eat Underspecified Goals」. Ribbonfarm . 2017 年1 月 26 日閲覧。
- ^ ロダマー、ジェフリー(2018年11月28日)。「法律が必要だ!キャンベル対グッドハート」意義。15 (6):9。doi : 10.1111 / j.1740-9713.2018.01205.x。
- ^ ラヴェッツ、ジェローム・R. (1971)。科学的知識とその社会的問題。ニューブランズウィック、ニュージャージー:トランザクション出版社。pp. 295–296。ISBN 1-56000-851-2. OCLC 32779931.
- ^ ダニエルソン、ジョン(2002年7月)。「皇帝は裸:リスクモデリングの限界」。Journal of Banking & Finance。26(7):1273–1296。CiteSeerX 10.1.1.27.3392。doi :10.1016 / S0378-4266(02)00263-7。
- ^ Biagioli, Mario (2016年7月12日). 「引用ゲームの不正行為に注意」(PDF) . Nature . 535 (7611): 201. Bibcode :2016Natur.535..201B. doi : 10.1038/535201a . PMID 27411599.
- ^ ヴァレラ、ディエゴ;ベネデット、ジャコモ。サンチェス=サントス、ホセ・マヌエル(2014年12月30日)。 「編集上の声明: ジャーナルの管理に関するグッドハートの法則からの教訓」。欧州政府経済ジャーナル。3 (2): 100-103。土井:10.17979/ejge.2014.3.2.4299。hdl : 2183/23376。S2CID 152551763 。2022 年2 月 8 日に取得。
- ^ Hoskin, Keith (1996). 「説明責任という恐ろしい考え」:物体の測定に人々を巻き込むこと。
- ^ Koltun, V; Hafner, D (2021). 「h-indexはもはや科学的評判の有効な相関関係ではない」. PLOS ONE . 16 (6): e0253397. arXiv : 2102.03234 . Bibcode :2021PLoSO..1653397K. doi : 10.1371/journal.pone.0253397 . PMC 8238192. PMID 34181681.私たちの研究結果は、科学者のランキング付けにおけるh-indexの
使用を再考する必要があり、h-fracなどの割合割り当て尺度がより堅牢な代替手段となることを示唆している。
コンパニオンウェブページ - ^ Mooers, Arne (2022-05-23). 「種が本当に絶滅するのはいつですか?」The Conversation . 2023-06-23閲覧。
- ^ Martin, TE; Bennett, GC; Fairbairn, A.; Mooers, AO (2023年3月). 「「失われた」分類群とその保全への影響」.動物保全. 26 (1): 14–24. Bibcode :2023AnCon..26...14M. doi :10.1111/acv.12788. ISSN 1367-9430. S2CID 248846699.
- ^ Babar, Sultan M. (2023-11-08). 「医療におけるコブラ効果:グッドハートの法則と誤った指標の落とし穴」sultan.babar.me . 2024-09-25閲覧。
- ^ チヴァース、トム; チヴァース、デイヴィッド (2021)。「22: グッドハートの法則」。数字の読み方。ワイデンフェルド&ニコルソン。ISBN 9781474619974。
- ^ Revanka, Roshan (2016年1月20日). 「Juking the Stats」. medium.com . 2024年8月14日閲覧。
さらに読む
- Chrystal, K. Alec; Mizen, Paul D. (2001年11月12日). 「グッドハートの法則:その起源、意味、金融政策への影響」(PDF) 。 2020年7月3日閲覧。
- マンハイム、デイビッド(2016年6月9日)。「グッドハートの法則となぜ測定が難しいのか」。ribbonfarm 。 2020年7月3日閲覧。
- マローン、ケニー、ゴンザレス、サラ、ホロウィッツ=ガジ、アレックス、ゴールドマーク、アレックス(2018年11月21日)。「オフィスの法則」。Planet Money(ポッドキャスト)。NPR 。 2020年7月3日閲覧。
- ミュラー、ジェリー Z. (2018)。『メトリックスの暴政』プリンストン大学出版局。ISBN 978-0-691-19126-3。
