其一步状态转移图如下 1/2 3/4 1/2 1/2 (3 1/4 1/2 不是吸收链 EX.4醉汉问题状态空间E={1,,2,3,4,5} 状态转移图为 1 1/3 1/3 1/3 1 1/3 1/3 1/3 2 4 1/3 1/3 1/3
电子科技大学 1 2 1/2 1/2 1/4 3/4 3 4 5 1 1/2 1/2 1 不是吸收链. 其一步状态转移图如下 EX.4 醉汉问题 状态空间E={1, ,2, 3, 4, 5} 状态转移图为 1 2 3 4 5 1 1/3 1/3 1/3 1 1/3 1/3 1/3 1/3 1/3 1/3
转移概率矩阵为 0 0 0 0 1/ 73 73 0 0 3 P= 0 1/ 1 73 0 3 3 0 0 /3 ⅓ 0 0 0 0 1 如何计算他从各街口回家或重回酒吧的 平均徘徊次数?
电子科技大学 转移概率矩阵为 0 0 0 0 1 3 1 3 1 3 1 0 0 0 3 1 3 1 3 1 0 0 0 3 1 3 1 3 1 1 0 0 0 0 P 如何计算他从各街口回家或重回酒吧的 平均徘徊次数?