【随机过程2】马尔可夫过程2 | 状态空间

你你是下雨天 glooow1024.github.io 2022/01/24

6.4 状态空间的分解 定义 ：设 \(A\subsetS\) ，若对任意 \(i\in A\) 及 \(j\notin A\) ，都有 \(p_{ij}=0\) ，称 \(A\) 为 闭集 。若 \(A\) 的状态是相通的，则 \(A\) 为 不可约 的。 引理 6.1 ： \(A\) 为闭集的充要条件为：任意 \(i\in A\) 及 \(j\notin A\) 都有 \(p_{ij}^{(n…