確率論において、区分決定論的マルコフ過程 (PDMP)は、ある時点でのランダムなジャンプによってその動作が支配されるが、その発展はそれらの時点間の常微分方程式によって決定論的に支配される過程である。このモデルのクラスは「応用確率の事実上すべての非拡散モデルを特別なケースとして含めるほど広い」。[1]この過程は、フロー、ジャンプ率、遷移尺度の 3 つの量によって定義される。[2]
このモデルは1984年にマーク・HA・デイビスの論文で初めて導入されました。[1]
例
マルコフ連鎖、連続時間マルコフ連鎖、M/G/1キュー、GI/G/1キュー、流体キューなどの区分線形モデルは、単純な微分方程式を持つPDMPとしてカプセル化できます。[1]
アプリケーション
PDMPは、破壊理論[3]、 待ち行列理論[4]、[5]、真核生物におけるDNA複製や生物B. subtilisによるサブチリン生成などの生化学プロセスのモデリング[6]、地震のモデリング[7]において有用であることが示されています。さらに、このクラスのプロセスは、確率的イオンチャネルを備えた生物物理学的ニューロンモデルに適していることが示されています。[8]
プロパティ
LöpkerとPalmowskiは、時間反転したPDMPがPDMPとなる条件を示した。 [9] PDMPが安定するための一般的な条件は知られている。[10]
Galtierら[11]はPDMPの軌道の法則を研究し、 PDMPの軌道の密度を表現するための基準尺度を提供しました 。彼らの研究は、軌道の密度を使用するあらゆるアプリケーションへの道を開きます。(たとえば、彼らは軌道の密度を使用して重要度サンプリングを実行しました。この研究はChennetierとAl. [12]によって産業システムの信頼性を推定するためにさらに発展しました。)
参照
- ジャンプ拡散、区分決定論的マルコフ過程の一般化
- ハイブリッドシステム(動的システムの文脈では)、すべてのジャンプ拡散(したがってすべての区分決定論的マルコフ過程)を含む動的システムの広いクラス
参考文献
- ^ abc Davis, MHA (1984). 「区分的決定論的マルコフ過程: 非拡散確率モデルの一般クラス」.英国王立統計学会誌. シリーズ B (方法論) . 46 (3): 353–388. doi :10.1111/j.2517-6161.1984.tb01308.x. JSTOR 2345677.
- ^ Costa, OLV; Dufour, F. (2010). 「区分的決定論的マルコフ過程の平均連続制御」SIAM Journal on Control and Optimization . 48 (7): 4262. arXiv : 0809.0477 . doi :10.1137/080718541. S2CID 14257280.
- ^ Embrechts, P.; Schmidli, H. (1994). 「一般保険リスクモデルの破滅予測」.応用確率論の進歩. 26 (2): 404–422. doi :10.2307/1427443. JSTOR 1427443. S2CID 124108500.
- ^ Browne, Sid; Sigman, Karl (1992). 「ワーク変調キューとストレージプロセスへの応用」. Journal of Applied Probability . 29 (3): 699–712. doi :10.2307/3214906. JSTOR 3214906. S2CID 122273001.
- ^ Boxma, O. ; Kaspi, H. ; Kella, O.; Perry, D. (2005). 「状態依存の入力、出力、およびスイッチング レートを備えたオン/オフ ストレージ システム」。工学および情報科学における確率。19 : 1–14。CiteSeerX 10.1.1.556.6718。doi : 10.1017/ S0269964805050011。S2CID 24065678 。
- ^ Cassandras, Christos G.; Lygeros, John (2007). 「第 9 章 生化学プロセスの確率的ハイブリッド モデリング」(PDF) .確率的ハイブリッド システム. CRC プレス. ISBN 9780849390838。
- ^ Ogata, Y.; Vere-Jones, D. (1984). 「地震モデルの推論:自己修正モデル」.確率過程とその応用. 17 (2): 337. doi : 10.1016/0304-4149(84)90009-7 .
- ^ Pakdaman, K.; Thieullen, M.; Wainrib, G. (2010 年 9 月). 「ニューロン モデルへの応用を伴う確率的ハイブリッド システムの流体極限定理」.応用確率論の進歩. 42 (3): 761–794. arXiv : 1001.2474 . doi :10.1239/aap/1282924062. S2CID 18894661.
- ^ Löpker, A.; Palmowski, Z. (2013). 「区分 的決定論的マルコフ過程の時間反転について」. Electronic Journal of Probability . 18. arXiv : 1110.3813 . doi :10.1214/EJP.v18-1958. S2CID 1453859.
- ^ Costa, OLV; Dufour, F. (2008). 「区分的決定論的マルコフ過程の安定性とエルゴード性」(PDF) . SIAM Journal on Control and Optimization . 47 (2): 1053. doi :10.1137/060670109.
- ^ Galtier, T. (2019). 「区分的決定論的マルコフ過程の最適重要度過程について」. Esaim: Ps . 23 : 893–921. doi : 10.1051/ps/2019015 . S2CID 198467101.
- ^ Chennetier, G. (2022). 「区分的決定論的マルコフ過程のフォールトツリー分析に基づく適応型重要度サンプリング」. arXiv : 2210.16185 [stat.CO].
