情報場理論(IFT) は、信号再構成、宇宙論、およびその他の関連分野に関連するベイズ統計場理論です。 [ 1 ] [ 2 ] IFT は、ベイズ確率を使用して物理場に関する利用可能な情報を要約します。量子場理論および統計場理論用に開発された計算手法を使用して、場の無限の自由度を扱い、場の期待値を計算するアルゴリズムを導出します。たとえば、既知のガウス過程によって生成され、既知のガウスノイズ統計を持つ線形デバイスによって測定された場の事後期待値は、測定データに適用される一般化ウィーナーフィルターによって与えられます。IFT は、このような既知のフィルター式を、非線形物理、非線形デバイス、非ガウス場またはノイズ統計、ノイズ統計の場の値への依存性、および部分的に未知の測定パラメータがある状況に拡張します。このために、ファインマン図、繰り込みフロー方程式、および数理物理学からのその他の方法を使用します。[ 3 ]
場は科学、技術、経済において重要な役割を果たします。場は、気温などの量の空間的な変化を位置の関数として記述します。場の構成を知ることは非常に価値があります。しかし、場の測定によって正確な場の構成を確実に得ることは決してできません。物理場は無限の自由度を持ちますが、測定装置によって生成されるデータは常に有限であり、場に対する制約も有限です。したがって、測定データのみからそのような場を明確に推論することは不可能であり、場について述べる手段としては確率的推論しか残されていません。幸いなことに、物理場は相関関係を示し、多くの場合、既知の物理法則に従います。このような情報は、場の自由度と測定点の不一致を克服するために、場の推論に最もよく組み込まれます。これに対処するには、場の情報理論が必要であり、それが情報場理論です。
場所にあるフィールド値です空間の中で未知の信号場に関する事前知識確率分布に符号化されている.データ追加情報を提供します可能性を通じて それは事後確率に組み込まれるベイズの定理によれば。[ 4 ]
IFTでは、ベイズの定理は通常、統計場理論の言葉で書き直され、情報ハミルトニアンを以下のように定義するデータと信号の同時確率の負の対数であり、分割関数はこのベイズの定理の再定式化により、統計場理論や量子場理論を扱うために開発された数理物理学の手法を用いることが可能になる。
場は無限の自由度を持つため、場の配置空間における確率の定義には微妙な点があります。物理場を関数空間の要素として定義すると、後者にはルベーグ測度が定義されないため、確率密度を定義できないという問題が生じます。しかし、物理場はほとんどの場所で連続かつ滑らかであるため、関数空間のほとんどの要素よりもはるかに規則性があります。したがって、より一般的ではないものの、十分に柔軟な構成を用いることで、場の無限の自由度を扱うことができます。
実用的なアプローチとしては、離散化対象の場をピクセル単位で捉えることが挙げられる。各ピクセルは単一の場値を持ち、その値はピクセル体積内で一定であると仮定される。連続場に関するすべての記述は、ピクセル表現に変換する必要がある。このようにして、確率密度を明確に定義できる有限次元の場空間を扱うことができる。
この記述が適切な場の理論となるためには、さらにピクセル解像度が離散化された場の期待値は常に洗練される可能性があるが、 有限値に収束する:
この限界が存在する場合、場の配置空間積分または経路積分について議論することができる。解像度に関係なく、数値的に評価される可能性がある。
場の最も単純な事前分布は、平均値がゼロのガウス確率分布である。分母の行列式は連続体極限では定義が不明確になる可能性があるしかし、IFTが整合性を保つために必要なのは、この行列式が任意の有限解像度フィールド表現に対して推定できることだけである。 そして、これにより収束する期待値の計算が可能になる。
ガウス確率分布では、場の2点相関関数を指定する必要があります。係数付き連続場のスカラー積逆信号場共分散に関して構築される、つまり
対応する事前情報ハミルトニアンは次のように表される。
測定データ尤度で生成されました測定器が線形である場合、次の形式の測定方程式が成り立つ。与えることができる、は機器の応答であり、データが平均的に信号にどのように反応するかを記述するものであり、ノイズとは、単にデータ間の差のことです。線形信号応答応答は、無限次元の信号ベクトルを有限次元のデータ空間に変換します。コンポーネントで表すと次のようになります。
また、信号ベクトルとデータベクトルに対して、ベクトル成分表記法も導入された。
ノイズが信号に依存しないゼロ平均ガウス統計に従う場合、共分散、すると尤度もガウス分布になる。そして尤度情報ハミルトニアンはガウス信号と信号に依存しないノイズの影響を受けるガウス信号の線形測定は、自由なIFTにつながる。
上記で説明したガウスシナリオの結合情報ハミルトニアンは次のとおりです。どこは無関係な定数を除いて等号を表し、この場合、それは に依存しない式を意味します。このことから、事後分布は平均が のガウス分布でなければならないことが明らかである。 および分散、両方の分布が正規化されているため、右辺と左辺の等式が成り立つ。。
事後平均これは一般化ウィーナーフィルター解および不確実性共分散 としても知られていますウィーナー分散として。
IFTでは、は情報源と呼ばれ、分野(知識)を刺激するソース用語として機能し、情報伝播器は、情報をある場所から別の場所に伝播します。
自由理論を導く前提条件のいずれかが破られると、IFTは相互作用理論となり、信号場において2次以上の項が含まれるようになる。これは、信号またはノイズがガウス統計に従わない場合、応答が非線形である場合、ノイズが信号に依存する場合、または応答や共分散が不確実な場合に発生する。
この場合、情報ハミルトニアンはテイラー・フレシェ級数に展開できる可能性がある。
どこ は自由ハミルトニアンであり、それだけでガウス事後分布が得られる。は相互作用するハミルトニアンであり、非ガウス補正を符号化している。1次および2次のテイラー係数は、しばしば(負の)情報源と同一視される。 情報伝播者それぞれ。係数が高いほど非線形自己相互作用に関連している。
古典分野情報ハミルトニアンを最小化する、 したがって、事後確率を最大化する。古典分野 したがって、これは場推論問題における最大事後確率推定量である。
ウィーナーフィルターの問題では、2点相関が必要となる。既知のフィールドの 。 が未知の場合は、フィールド自体とともに推論する必要があります。これには、ハイパープライアーの指定が必要です。多くの場合、統計的均一性(並進不変性)が仮定でき、これは次のことを意味します。フーリエ空間では対角である( であること (次元デカルト空間)。この場合、フーリエ空間パワースペクトルのみ推測する必要がある。統計的等方性をさらに仮定すると、このスペクトルは長さのみに依存する。フーリエベクトルのそして、スペクトルは一次元のみである。を決定する必要がある。事前場の共分散は、フーリエ空間座標では次のようになる。。
以前のはフラットであり、データとスペクトルの同時確率は情報伝播子の表記法情報源ウィーナーフィルター問題の式が再び使用された。対応する情報ハミルトニアンはどこ無関係な定数を除いて等しいことを表す(ここでは、) に関してこれを最小限に抑える最大事後パワースペクトル推定値を得るために、ウィーナーフィルターの平均そしてスペクトルバンドプロジェクターが導入された。後者は、 以来 はフーリエ空間で対角行列となる。したがって、パワースペクトルの最大事後確率推定量は次のようになる。反復計算する必要がある。そして両方に依存する彼ら自身。経験ベイズアプローチでは、推定された は所与のものとして扱われる。結果として、信号場の事後平均推定値は対応する およびそれに対応する不確実性 経験ベイズ近似において。
結果として得られる非線形フィルタはクリティカルフィルタと呼ばれる。[ 5 ]パワースペクトル推定式の一般化は次のようになる。知覚閾値を示すつまり、信号再構成を行う前に、フーリエ帯域におけるデータ分散が、期待されるノイズレベルを一定の閾値以上超える必要があるということである。この帯域では、がゼロ以外になります。データの分散がこの閾値をわずかに超えると、信号の再構成は有限の励起レベルにジャンプし、熱力学系の一次相転移に似ています。フィルターの場合、 信号の知覚は、データの分散がノイズレベルを超えるとすぐに連続的に開始されます。不連続な知覚が消失するのは、 これは、熱力学系が臨界点を通過する過程 に似ている。そのため、臨界フィルターという名前が付けられている。
クリティカルフィルタ、その非線形測定への拡張、および非フラットスペクトル事前分布の導入により、IFTを現実世界の信号推論問題に適用することが可能になった。これらの問題では、通常、信号の共分散は事前に不明である。

自由IFTに現れる一般化ウィーナーフィルタは、信号処理において広く用いられている。IFTを明示的にベースとしたアルゴリズムは、数多くの応用分野向けに開発されてきた。それらの多くは、数値情報場理論(NIFTy)ライブラリを用いて実装されている。
量子場理論の多くの手法は、ファインマン図、有効作用、場演算子形式など、IFTの問題に取り組むために利用できる。

相互作用係数が情報ハミルトニアンのテイラー・フレシェ展開 においてが小さい場合、対数分配関数、またはヘルムホルツ自由エネルギー、 これらの係数に関して漸近的に展開することができる。自由ハミルトニアンは平均を指定する。および分散ガウス分布の展開が積分される範囲。これにより、集合全体にわたる和が得られる。すべての接続されたファインマン図から。ヘルムホルツ自由エネルギーから、場の任意の接続されたモーメントは、次のように計算できます。このような図式展開が収束するために必要な小さな展開パラメータが存在する状況は、ほぼガウス型の信号場によって与えられ、場の統計の非ガウス性によって相互作用係数が小さくなる。例えば、宇宙マイクロ波背景放射の統計はほぼガウス分布であり、初期宇宙のインフレーション期に生じたと考えられるわずかな非ガウス分布が存在する。
IFT問題で安定した数値計算を行うためには、最小化することで事後平均場を与える場汎関数が必要となる。これは、場の有効作用またはギブズ自由エネルギーによって与えられる。ギブズ自由エネルギーヘルムホルツ自由エネルギーからルジャンドル変換によって構築できる。IFTでは、内部情報エネルギーの差によって与えられる。そしてシャノンエントロピー温度ガウス事後近似近似データとともに使用されます場の平均値と分散を含む。[ 6 ]
ギブズ自由エネルギーはカルバック・ライブラーダイバージェンス近似事後確率と厳密事後確率、およびヘルムホルツ自由エネルギーの間の値。後者は近似データに依存しないためギブス自由エネルギーを最小化することは、近似事後分布と厳密事後分布間のカルバック・ライブラー情報量を最小化することと同等である。したがって、IFTの有効作用アプローチは、近似事後分布と厳密事後分布間のカルバック・ライブラー情報量を最小化する変分ベイズ法と同等である。
ギブス自由エネルギーを最小化することで、事後平均場が近似的に得られる。一方、情報ハミルトニアンを最小化すると、事後確率場が最大化される。後者はノイズに過剰適合することが知られているため、前者の方が通常はより優れた場推定器となる。
ギブズ自由エネルギーの計算には、情報ハミルトニアン上のガウス積分の計算が必要です。内部情報エネルギーはこのような積分は、場演算子形式[ 7 ]を用いて計算することができ、はフィールド演算子です。これによりフィールド式が生成されます。ガウス分布関数に適用した場合、積分内では、また、場のより高いパワーを複数回適用した場合、情報ハミルトニアンが解析的であれば、そのすべての項は場演算子を介して生成できる。フィールドオペレーターはフィールドに依存しないためそれ自体は、内部情報エネルギー構築の経路積分から引き出すことができ、どこ常に値を返す関数とみなされるべきである入力値に関係なく結果として得られる式は、平均場消滅演算子を交換することによって計算できる。表現の右側では、それらは消えてしまうので平均場消滅器平均場と可換である
場演算子形式を用いることでギブス自由エネルギーを計算することができ、これにより数値的に頑健な関数最小化を通して事後平均場を(近似的に)推論することが可能となる。
ノルベルト・ウィーナーの著書[ 8 ]は、場推論に関する最初の著作の一つとみなされるかもしれない。場推論に経路積分を用いる方法は、エドムント・ベルチンガー[ 9 ]やウィリアム・ビアレクとA.ジー[ 10 ]など、多くの著者によって提案された。場理論とベイズ推論の関連性は、イェルク・レム[ 11 ]によって明確にされた。情報場理論という用語は、トルステン・エンスリン[ 12 ]によって造語された。IFTの歴史に関する詳細は、後者の文献を参照のこと。
{{cite book}}ISBN /日付の不一致(ヘルプ)