东南大学随机过程课件--第16讲 离散时间Markov链.ppt

,单击此处编辑母版标题样式,*,东南大学无线电工程系,*,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,随机过程,教程,第,16,讲,离散时间,Markov,链,东南大学移动通信国家重点实验室,陈 明 制作,4/9/2026,1,东南大学无线电工程系,内容提要,离散时间,Markov,链的定义,离散时间,Markov,链的,状态分类,4/9/2026,2,东南大学无线电工程系,Markov,链的定义,Markov,链：状态值可数离散的,Markov,过程,离散时间,Markov,链,连续时间,Markov,链,4/9/2026,3,东南大学无线电工程系,离散时间,Markov,链,状态概率,状态概率矢量,转移概率,转移概率矩阵,4/9/2026,4,东南大学无线电工程系,C-K,方程,4/9/2026,5,东南大学无线电工程系,平稳状态概率的求解,4/9/2026,6,东南大学无线电工程系,状态的互达,定义,等价类,可约,4/9/2026,7,东南大学无线电工程系,常返和,瞬过,首达概率的定义,迟早到达概率,常返和瞬过,4/9/2026,8,东南大学无线电工程系,状态空间的分解,4/9/2026,9,东南大学无线电工程系,状态空间分解定理,4/9/2026,10,东南大学无线电工程系,有限状态分解定理,4/9/2026,11,东南大学无线电工程系,（续）,4/9/2026,12,东南大学无线电工程系,状态的周期,4/9/2026,13,东南大学无线电工程系,状态的遍历,4/9/2026,14,东南大学无线电工程系,作业,6.1,6.5,6.7,4/9/2026,15,东南大学无线电工程系,随机过程,第,16,讲 “离散时间,Markov,链”终。,4/9/2026,16,东南大学无线电工程系,