再生理論は、任意の保持時間に対して ポアソン過程を 一般化した確率論 の一分野です。指数分布に従う 保持時間の代わりに、再生過程は有限の期待値を持つ任意の独立同分布 (IID)の保持時間を持つことができます。さらに、再生報酬過程では、各保持時間で発生する報酬のランダムな系列があり、これはIIDですが、保持時間と独立である必要はありません。
再生過程は、大数の強法則 や中心極限定理 に類似した漸近的性質を持つ。再生関数m ( t ) {\displaystyle m(t)} (到着予定人数)と報酬関数g ( t ) {\displaystyle g(t)} (期待報酬値)は再生理論において極めて重要である。再生関数は再帰積分方程式、再生方程式を満たす。重要な再生方程式は、畳み込み の極限値を与える。m ′ ( t ) {\displaystyle m'(t)} 適切な非負関数を用いる。再生過程の重ね合わせは、マルコフ再生過程 の特殊な場合として研究することができる。
応用例としては、工場で老朽化した機械を交換するための最適な戦略を計算すること、さまざまな保険契約の長期的なメリットを比較すること、感染症の伝播をモデル化することなどが挙げられます。感染症の伝播をモデル化する際には、「再生数 の推論に最も広く採用されている方法の1つは、再生方程式によるものである」とされています。[ 1 ] 検査のパラドックスは、時刻t で再生間隔を観測すると、平均再生間隔よりも平均値が大きい間隔が得られるという事実に関連しています。
更新プロセス
導入 再生過程は ポアソン過程 の一般化である。本質的に、ポアソン過程は正の整数(通常はゼロから始まる)上の連続時間マルコフ過程 であり、各整数において独立な指数分布に従う保持時間を持つ。 私 {\displaystyle i} 次の整数に進む前に、私 + 1 {\displaystyle i+1} 再生プロセスでは、保持時間は指数分布に従う必要はなく、保持時間が独立同分布(IID )であり、かつ有限の平均を持つ限り、正の数の任意の分布に従うことができます。
解釈 ランダムな時間に発生する事象を考慮する場合、保持時間について考えることもできる。{ S 私 : 私 ≥ 1 } {\displaystyle \{S_{i}:i\geq 1\}} 連続する2つの事象の間に経過するランダムな時間として表されます。例えば、再生プロセスがさまざまな機械の故障数をモデル化している場合、保持時間は、ある機械が故障してから次の機械が故障するまでの時間を表します。
ポアソン過程はマルコフ性 を持つ唯一の再生過程であり、指数分布は記憶のない性質を持つ唯一の連続確率変数である。
更新報酬プロセス 保持時間 S i 、ジャンプ時間J n 、報酬W i を持つ更新報酬プロセスの進化例させてW 1 、 W 2 、 … {\displaystyle W_{1},W_{2},\ldots } を満たすIID 確率変数 (報酬 )のシーケンス
E | W 私 | < ∞ 。 {\displaystyle \operatorname {E} |W_{i}|<\infty .\,} 次にランダム変数
Y t = ∑ 私 = 1 X t W 私 {\displaystyle Y_{t}=\sum _{i=1}^{X_{t}}W_{i}} これは更新報酬プロセス と呼ばれます。S 私 {\displaystyle S_{i}} 、 それぞれW 私 {\displaystyle W_{i}} 正の値だけでなく負の値も取る可能性があります。
確率変数Y t {\displaystyle Y_{t}} 2つのシーケンスに依存します: 保持時間S 1 、 S 2 、 … {\displaystyle S_{1},S_{2},\ldots } そして報酬 W 1 、 W 2 、 … {\displaystyle W_{1},W_{2},\ldots } これら2つのシーケンスは独立している必要はありません。特に、W 私 {\displaystyle W_{i}} 関数である可能性があるS 私 {\displaystyle S_{i}} 。
解釈 上記のように保持時間を機械の連続する故障間の時間として解釈すると、「報酬」W 1 、 W 2 、 … {\displaystyle W_{1},W_{2},\ldots } (この場合はたまたまマイナスの値となる)は、連続する故障の結果として発生する連続的な修理費用と見なすことができる。
別の例えとしては、一定の間隔(保持時間)で卵を産む魔法のガチョウがいるとします。S 私 {\displaystyle S_{i}} 時には重さがランダムな金の卵を産み、時には(これも重さがランダムな)有毒な卵を産み、それらは責任ある(そして費用のかかる)処分が必要となる。「報酬」W 私 {\displaystyle W_{i}} は、連続する卵 ( i = 1,2,3,...)から生じる連続する (ランダムな) 金銭的損失/利益であり、Y t {\displaystyle Y_{t}} 時刻t における総金銭的「報酬」を記録します。
更新機能 再生関数は、 ある時点までに観測されたジャンプの数の期待値 として定義される。t {\displaystyle t} :
m ( t ) = E [ X t ] 。 {\displaystyle m(t)=\operatorname {E} [X_{t}].\,}
初等再生定理 再生関数は以下を満たす。
リム t → ∞ 1 t m ( t ) = 1 E [ S 1 ] 。 {\displaystyle \lim _{t\to \infty }{\frac {1}{t}}m(t)={\frac {1}{\operatorname {E} [S_{1}]}}.}
再生報酬過程に関する基本的な再生定理 報酬関数 を定義します。
g ( t ) = E [ Y t ] 。 {\displaystyle g(t)=\operatorname {E} [Y_{t}].\,} 報酬関数は以下を満たす。
リム t → ∞ 1 t g ( t ) = E [ W 1 ] E [ S 1 ] 。 {\displaystyle \lim _{t\to \infty }{\frac {1}{t}}g(t)={\frac {\operatorname {E} [W_{1}]}{\operatorname {E} [S_{1}]}}.}
再生方程式 再生関数は以下を満たす。
m ( t ) = F S ( t ) + ∫ 0 t m ( t − s ) f S ( s ) d s {\displaystyle m(t)=F_{S}(t)+\int _{0}^{t}m(ts)f_{S}(s)\,ds} どこF S {\displaystyle F_{S}} は、S 1 {\displaystyle S_{1}} そしてf S {\displaystyle f_{S}} は対応する確率密度関数です。
漸近的性質 再生過程と再生報酬過程は、同じ定理から導き出せる大数の強法則に類似した性質を持つ。 ( X t ) t ≥ 0 {\displaystyle (X_{t})_{t\geq 0}} 更新プロセスであり、( Y t ) t ≥ 0 {\displaystyle (Y_{t})_{t\geq 0}} つまり、更新報酬プロセスということになる。
リム t → ∞ 1 t X t = 1 E [ S 1 ] {\displaystyle \lim _{t\to \infty }{\frac {1}{t}}X_{t}={\frac {1}{\operatorname {E} [S_{1}]}}} リム t → ∞ 1 t Y t = 1 E [ S 1 ] E [ W 1 ] {\displaystyle \lim _{t\to \infty }{\frac {1}{t}}Y_{t}={\frac {1}{\operatorname {E} [S_{1}]}}\operatorname {E} [W_{1}]} ほぼ間違いなく。
再生過程には、中心極限定理 に類似した性質も備わっている。
X t − t / μ t σ 2 / μ 3 → N ( 0 、 1 ) {\displaystyle {\frac {X_{t}-t/\mu }{\sqrt {t\sigma ^{2}/\mu ^{3}}}}\to {\mathcal {N}}(0,1)}
検査のパラドックス ランダムな点t (赤色で示されている)によって決定される更新間隔は、最初の更新間隔よりも確率的に大きくなる。 再生過程の興味深い特徴は、あらかじめ決められた時間t を待ってから、 t を含む再生区間の大きさを観察すると、通常は平均的な大きさの再生区間よりも大きくなることが予想される点である。
数学的に言えば、検査のパラドックス は、任意の t > 0 に対して、t を含む再生区間は最初の再生区間よりも確率的に大きい、 と述べている。つまり、すべてのx > 0 およびすべてのt > 0 に対して、次のようになる。
P ( S X t + 1 > x ) ≥ P ( S 1 > x ) = 1 − F S ( x ) {\displaystyle \operatorname {P} (S_{X_{t}+1}>x)\geq \operatorname {P} (S_{1}>x)=1-F_{S}(x)} ここでF S は IID の保持時間S i の累積分布関数です。バスの待ち時間のパラドックス は分かりやすい例です。バスの到着のランダムな分布が与えられた場合、バス停の平均的な乗客は、バスの平均的な運転手よりも多くの遅延を目撃します。
このパラドックスの解決策は、時刻t における標本分布がサイズバイアス(標本バイアス を参照)を持つ、つまり、ある区間が選択される確率がそのサイズに比例するという点にある。しかし、平均サイズの再生区間はサイズバイアスを持たない。
重ね合わせ 再生過程がポアソン過程でない限り、2 つの独立した再生過程の重ね合わせ (和) は再生過程ではありません。ただし、このような過程は、マルコフ再生過程 と呼ばれるより大きなクラスの過程内で記述できます。[ 9 ] ただし、重ね合わせ過程における最初のイベント間隔時間の累積分布関数は次のように与えられます。 [ 10 ]
R ( t ) = 1 − ∑ k = 1 K α k ∑ l = 1 K α l ( 1 − R k ( t ) ) ∏ j = 1 、 j ≠ k K α j ∫ t ∞ ( 1 − R j ( u ) ) d u {\displaystyle R(t)=1-\sum _{k=1}^{K}{\frac {\alpha _{k}}{\sum _{l=1}^{K}\alpha _{l}}}(1-R_{k}(t))\prod _{j=1,j\neq k}^{K}\alpha _{j}\int _{t}^{\infty }(1-R_{j}(u))\,{\text{d}}u} ここで、R k ( t ) とα k > 0 は、プロセスk のイベント間隔時間と到着率の CDF です。[ 11 ]
適用例 起業家のエリックはn台の 機械を所有しており、各機械の稼働寿命は0年から2年の間で均等に分布している。エリックは各機械が故障するまで稼働させ続けることができ、その場合の交換費用は2600ユーロである。あるいは、機械がまだ稼働しているうちにいつでも交換することができ、その場合の費用は200ユーロである。
彼の最適な代替政策とは何か?
注記 ↑ Green, William D.; Ferguson, Neil M.; Cori, Anne (2022). "異質な流行における再生方程式を用いた基本再生産数の推定" . Journal of the Royal Society Interface . 19 (188) 20210429. doi : 10.1098/rsif.2021.0429 . PMC 8965414 . PMID 35350879 . ↑ Çinlar, Erhan (1969). "Markov Renewal Theory". Advances in Applied Probability . 1 (2). Applied Probability Trust: 123– 187. doi : 10.2307/1426216 . JSTOR 1426216 . ↑ Lawrence, AJ (1973). "重ね合わせ過程における事象間の間隔の依存性". Journal of the Royal Statistical Society. Series B (Methodological) . 35 (2): 306– 315. doi : 10.1111/j.2517-6161.1973.tb00960.x . JSTOR 2984914 . 式4.1↑ Choungmo Fofack, Nicaise; Nain, Philippe; Neglia, Giovanni; Towsley, Don (2012年3月6日). TTLベースのキャッシュネットワークの分析 . 第6回パフォーマンス評価手法とツールに関する国際会議の議事録 (レポート) . 2012年 11月15日 取得 .
参考文献 コックス、デイヴィッド (1970)。『再生理論 』ロンドン:メシュエン社、 142ページ。ISBN 0-412-20570-X 。Doob, JL (1948). 「確率論の観点から見た再生理論」(PDF) .アメリカ数学会紀要 . 63 (3): 422– 438. doi : 10.2307/1990567 . JSTOR 1990567 . フェラー、ウィリアム (1971)。確率論とその応用入門 。第 2巻(第2 版)。ワイリー。Grimmett, GR ; Stirzaker, DR (1992).確率とランダム過程 (第2 版). オックスフォード大学出版局. ISBN 0-19-857222-0 。Smith, Walter L. (1958). "再生理論とその影響". Journal of the Royal Statistical Society, Series B. 20 ( 2): 243–302 . doi : 10.1111/j.2517-6161.1958.tb00294.x . JSTOR 2983891 . Wanli Wang、Johannes HP Schulz、Weihua Deng、Eli Barkai (2018)。「裾の重い分布の滞在時間を持つ再生理論:典型的と稀なケース」。Phys . Rev. E . 98 (4 ) 042139。arXiv : 1809.05856 。Bibcode : 2018PhRvE..98d2139W。doi : 10.1103/ PhysRevE.98.042139 。S2CID 54727926 。 {{cite journal}}: CS1 maint: 複数の名前: 著者リスト (リンク)