随机信号分析课件20马尔可夫过程

??一步时,称为转移概率( )ijk n p nn?步时,称为转移概率11 12 121 22 21 2NNN N NNp p pp p pp p p? ?? ?? ??? ?? ?? ?P??? ????一步转移概率矩阵????????????????????11 12 121 22 21 2NNnNN NNp n p n p np n p n p nnp n p n p n? ?? ?? ?? ?? ?? ?? ?? ?PP??? ????n步转移概率矩阵举例(随机游动)1 2M M, , , ,nt t t?? ?设质点在直线段上做随机游动。假定质点只能停留在1,2, ,N点上,且只在时刻发生游动。