第四章 马尔可夫链
马尔可夫链定义
一步转移概率及多步转移概率
Chapman-Kolmogorov
初始概率及绝对概率
马尔可夫链状态分类
遍历的马尔可夫链及平稳分布
1
§ 马尔可夫链的概念及转移概率
一、马尔可夫链的概念
2
3
2、马氏链的转移概率
称条件概率
4
3、一步转移概率及矩阵
称为马氏链的一步转移概率矩阵
5
6
7
通常我们还规定:
(2)、切普曼—柯尔莫哥洛夫方程
(Chapman-Kolmogorov)
8
直观解释对照图
9
10
南京邮电大学随机过程讲稿 第四章(1) 来自淘豆网www.taodocs.com转载请标明出处.