差分

このページの2つのバージョン間の差分を表示します。

この比較画面へのリンク

両方とも前のリビジョン前のリビジョン
最新のリビジョン両方とも次のリビジョン
markov_process [2018/12/12 01:12] – watalumarkov_process [2018/12/12 07:44] – watalu
行 20: 行 20:
  
 なお、互いに独立な確率変数の列もマルコフ性は満たす。 なお、互いに独立な確率変数の列もマルコフ性は満たす。
 +
 +マルコフ過程に関する簡単なことは[[http://bin.t.u-tokyo.ac.jp/startup16/file/2-2.pdf|この資料]](東京大学の都市生活学・ネットワーク行動学研究室の勉強会資料)によくまとまっているので、５分から１０分ほどかけて、一読しておくといい。
 +
 +=== 状態の分類 ===
 +
 +P[i,i]=1という遷移確率を持つ状態iを吸収状態という。
 +
 +=== チャップマン・コルモゴロフ方程式 ===
 +
 +=== 停止時刻 ===
 +
 +=== 再帰的 ===
 +
 +=== 収束定理 ===
 +
 +=== 定常分布 ===
  
 ==== マルコフ連鎖の例 ==== ==== マルコフ連鎖の例 ====
行 130: 行 146:
 [[r:MDPtoolbox]]パッケージは、マルコフ過程を少し拡張した、マルコフ決定過程をRで扱うのに便利な機能を提供する。 [[r:MDPtoolbox]]パッケージは、マルコフ過程を少し拡張した、マルコフ決定過程をRで扱うのに便利な機能を提供する。
  
 +==== msm ====
 +
 +パネルデータのための多状態モデル。
 +
 +==== mcmcR ====
 +
 +モンテカルロマルコフ連鎖。
 +
 +==== hmm ====
 +
 +共変量を持つ隠れマルコフモデル。
 +
 +==== mstate ====
 +
 +生存解析のためのマルコフ連鎖の上の多状態モデルの推定。