馬爾可天鏈{ξn,n=1,2,…}具有下面的轉(zhuǎn)移矩陣P,計(jì)算狀態(tài)1經(jīng)三步仍處于狀態(tài)1的概率。
n表示前n次取到的產(chǎn)品中所含廢品的個(gè)數(shù)。證明{ξn,n=1,2…}是一個(gè)馬爾可夫鏈,并寫出它的轉(zhuǎn)移矩陣。