概念導讀
有限狀態 Markov 鏈：核對行隨機矩陣，計算兩步時刻律與路徑機率
狀態依序為 1、2、3，轉移矩陣 P 的行為 (1/2,1/2,0)、(1/4,1/2,1/4)、(0,1/3,2/3)，初始律 μ_0=(1/2,1/2,0)。(1) 核對 P 是行隨機矩陣，並說明列和不必為 1；(2) 證明一步公式 μ_{n+1}=μ_nP 且結果仍是機率向量，算出 μ_1 與 μ_2；(3) 證明路徑機率公式並計算 P(X_0=1,X_1=2,X_2=3)、P(X_0=2,X_1=3,X_2=3)；(4) 說明 P 單獨一般不能決定完整的無條件時刻律與路徑律。