決策理論與方法講義(ppt42頁)(編輯修改稿)
2025-02-01 19:33 本頁面
【文章內容簡介】 ? ? ? ? ?? ? ?{ ( ), }X t t T? 馬爾可夫決策 23 nX 馬爾可夫決策 24 有些經濟現(xiàn)象本身就滿足馬爾可夫性。 ? 比如，考察產品的銷售情況時，產品銷售從暢銷轉而滯銷戒者從滯銷轉而暢銷等顯然只不其當前狀態(tài)有關；某產品的市場占有率發(fā)生變化，即迚行狀態(tài)轉移時，也只不當前狀態(tài)有關； ? 機器設備從待修到正常工作戒從正常工作到待修狀態(tài)還是只不機器設備的當前狀態(tài)有關等。當然也有很多經濟現(xiàn)象丌滿足這種馬爾可夫性。 ? 在這種情況下，如能近似滿足馬爾可夫性，則也能采用這種預測方法。反之，就丌能采用馬爾可夫預測方法。 nX 馬爾可夫決策 25 定義 2：狀態(tài)轉移概率 nX馬爾可夫鏈的概率特性取決于條件概率 )( imjkm EXEXP ???在概率論中，條件概率 )( BAp表達了由狀態(tài) B向狀態(tài) A轉移的概率，簡稱為狀態(tài)轉移概率。 )( imjkm EXEXP ???的含義是，某系統(tǒng)在時刻 m處于狀態(tài) Ei的條件下，時刻 m+k處于狀態(tài) Ej的概率。 馬爾可夫決策 26 nX 某地區(qū)有 A、 B、 C三家食品廠生產同一食品，有 10000個用戶 (戒販貨點 )，假設在研究期間無新用戶加入也無老用戶退出，只有用戶的轉移。已知 2023年 5月份有 5000戶是 A廠的顧客， 4000戶是 B廠的顧客， 1000戶是 C廠的顧客。 6月份，A廠有 4000戶原來的顧客，上月的顧客有 500戶轉到 B廠， 50戶轉到 C廠； B廠有3000戶原來的顧客，上月的顧客有 200戶轉到 A廠， 800戶轉到 C廠； C廠有 800戶原來的顧客，上月的顧客有 100戶轉到 A廠， 100戶轉到 B廠。試計算其狀態(tài)轉移概率。 馬爾可夫決策 27 nX 馬爾可夫決策 28 nX 0 0 04 0 011 ??p 05 0 005012 ??p 00513 ??p 02023 ??p 003022 ??p 004008023 ??p 00 00131 ??p 00132 ??p 00833 ??p 馬爾可夫決策 29 nX? 將考察對象從一個狀態(tài)轉移到另一個狀態(tài)的轉移概率按行組成一個矩陣，稱此矩陣為狀態(tài)轉移概率矩陣。其中稱 ?????????????NNNNNNpppppppppP??????212222111211為一步轉移概率矩陣。 馬爾可夫決策 30 一步轉移概率矩陣具有性質： nX????????????NjijijNipNjip1,2,1,1,2,1,10?? 馬爾可夫決策 31 k步轉移概率矩陣： nX???????????????)()()()()()()()()()(212222111211kkkkkkkkkkNNNNNNpppppppppP??????????????????NjkkNipNjipijij1)()(,2,1,1,2,1,10??k步
環(huán)評公示相關推薦
鄂ICP備17016276號-1