已知隨機(jī)游動(dòng)的轉(zhuǎn)移概率矩陣為 求三步轉(zhuǎn)移概率矩陣P(3)及當(dāng)初始分布為P{X0=1}=P{X0=2}=0,P{X0=3}=1時(shí),經(jīng)三步轉(zhuǎn)移后處于狀態(tài)3的概率p。
設(shè)馬爾可夫鏈的一步轉(zhuǎn)移概率矩陣為 試證此鏈不是遍歷的。