《随机过程》教程 第17拼连续的间 Markov链 东南大学移动通信国家重点实验室 陈明制作 chenming u. edu. cn ftp. seu.edu. cn/ Incoming/ document/随机过程 2021/2/22 东南大学无线电工程系
2021/2/22 东南大学无线电工程系 1 《随机过程》教程 第17讲 连续时间Markov链 东南大学移动通信国家重点实验室 陈 明 制作 chenming@seu.edu.cn ftp.seu.edu.cn/incoming/document/随机过程
内容提要 ■状态停留时间 状态微分方程 ■生灭过程 暂态解 ■稳态解 状态转移图 有限状态的生灭过程 嵌入 Markov链 2021/2/22 东南大学无线电工程系 2
2021/2/22 东南大学无线电工程系 2 内容提要 ◼ 状态停留时间 ◼ 状态微分方程 ◼ 生灭过程 ◼ 暂态解 ◼ 稳态解 ◼ 状态转移图 ◼ 有限状态的生灭过程 ◼ 嵌入Markov链
基本概念 状态概率 状态概率矢量 状态转移概率 ■状态转移矩阵 2021/2/22 东南大学无线电工程系 3
2021/2/22 东南大学无线电工程系 3 基本概念 ◼ 状态概率 ◼ 状态概率矢量 ◼ 状态转移概率 ◼ 状态转移矩阵
伏态停留时间 定理6.11设Ⅺ(t)是连续时间的 Markov链,则Ⅹ(t)停留于 某一给定状态的时间是一个指数型随机变量。 2021/2/22 东南大学无线电工程系 4
2021/2/22 东南大学无线电工程系 4 状态停留时间
伏态微分方程 =m"(6) 丌;(hb) m h->0b h-}0 n(t)=∑mn2(t) i∈S 2021/2/22 东南大学无线电工程系
2021/2/22 东南大学无线电工程系 5 状态微分方程