馬爾科夫預測與決策法(PDF 41頁）

馬爾科夫預測與決策法——是應用隨機過程中馬爾科夫鏈的理
論和方法研究分析有關經濟現象變化規律並借此對未來進行預
測和決策的一種方法。
池塘裏有三張荷葉，編號為1，2，3，假設有一隻青蛙隨機地
在荷葉上跳來跳去。在初始時刻t0，它在第二張荷葉上。在時
刻t1，它有可能跳到第一張或者第三張荷葉上，也有可能在原
地不動。我們把青蛙某個時刻所在的荷葉稱為青蛙所處的狀
態。這樣，青蛙在未來處於什麼狀態
..............................