问答题
从数1,2,…,N中任取一数,记为X1,再从1,2,…,X1中任取一数,记为X2;如此继续,从1,2,…,Xn-1中任取一数,记为Xn,说明{Xn,n≥1}构成一时齐的马氏链,并写出它的状态空间和一步转移概率矩阵。
问答题 设马尔可夫链的一步转移概率矩阵为 试证此链不是遍历的。
问答题 马尔可天链{ξn,n=1,2,…}具有下面的转移矩阵P,计算状态1经三步仍处于状态1的概率。
问答题 无月票的电汽车乘客,每乘一次需购买3角钱车票一张,无票乘车经查出要交罚款a元。此种情况发生之概率为10%。据估计,上次无票乘车被罚款的乘客,下次仍有30%的人不买票;而上次无票乘车未被发现的乘客,有80%的下次乘车仍不买票;有90%的上次买票的乘客,下次仍照章买票。ξn表示主管部门从一位无月票乘客第n次乘车时得到的收入。{ξn,n=1,2…}是一个马尔可夫链,状态空间E={0,0.30,a},写出转移矩阵P。