差分

このページの2つのバージョン間の差分を表示します。

この比較画面へのリンク

両方とも前のリビジョン前のリビジョン
r:maintenance:condition_monitoring_with_two_dimension_state [2019/01/07 09:57] – watalur:maintenance:condition_monitoring_with_two_dimension_state [2019/01/07 10:45] (現在) – watalu
行 1: 行 1:
 はじめに：この箇所のみ、状態を0から始める、として番号付けを行なっている。状態数がN+1の時、状態の番号は0からNまでとなる。 はじめに：この箇所のみ、状態を0から始める、として番号付けを行なっている。状態数がN+1の時、状態の番号は0からNまでとなる。
 +
 +===== 多次元の状態ベクトルを持つマルコフ決定過程 =====
 +
 +[[::markov_chain|マルコフ連鎖]]と[[::markov_decision_process|マルコフ決定過程]]は、状態が多次元の場合にも応用できる。以下では、状態が２次元の場合を例に、１次元に変換して、[[::r:markovchain|マルコフ連鎖のパッケージmarkovchain]]と[[::r:mdptoolbox|マルコフ決定過程のパッケージMDPtoolbox]]を用いる手順を説明する。〔現時点でこの原稿は、データの変換と状態遷移行列の推定については省略し、マルコフ決定過程の適用の準備を中心に述べている。〕
  
 ==== 直積状態空間の１次元への変換 ==== ==== 直積状態空間の１次元への変換 ====