隨機過程知識點匯總52047(編輯修改稿)
2025-07-20 06:44 本頁面
【文章內容簡介】 態(tài)是非常返（滑過）態(tài)。5．表示由出發(fā)再返回到的平均返回時間。若，則稱是正常返態(tài)；若，則稱是零常返態(tài)。非周期的正常返態(tài)是遍歷狀態(tài)。6．狀態(tài)是常返充要條件是；狀態(tài)是非常返充要條件是。7．稱狀態(tài)與互通。如果，則他們同為常返態(tài)或非常返態(tài)，；若，同為常返態(tài)，則他們同為正常返態(tài)或零常返態(tài)，且，有相同的周期。8．狀態(tài)是遍歷狀態(tài)的充要條件是。一個不可約的、非周期的、有限狀態(tài)的馬爾可夫鏈是遍歷的。9．要求：熟悉定義定理，能由一步轉移概率矩陣畫出狀態(tài)轉移圖，從而識別各狀態(tài)。三．狀態(tài)空間的分解1．設是狀態(tài)空間的一個閉集，如果對任意的狀態(tài)，狀態(tài)，都有（即從出發(fā)經一步轉移不能到達），則稱為閉集。如果的狀態(tài)互通，則稱是不可約的。如果狀態(tài)空間不可約，則馬爾可夫鏈不可約。或者說除了之外沒有其他閉集，則稱馬爾可夫鏈不可約。2．為閉集的充要條件是：對任意的狀態(tài)，狀態(tài)，都有。所以閉集的意思是自的內部不能到達的外部。意味著一旦質點進入閉集中，它將永遠留在中運動。 如果，則狀態(tài)為吸收的。等價于單點為閉集。3．馬爾可夫鏈的分解定理：任一馬爾可夫鏈的狀態(tài)空間，必可唯一地分解成有限個互不相交的子集的和，①每一個都是常返態(tài)組成的不可約閉集；②中的狀態(tài)同類，或全是正常返態(tài)，或全是零常返態(tài)，有相同的周期，且。③是由全體非常返態(tài)組成。 分解定理說明：狀態(tài)空間的狀態(tài)可按常返與非常返分為兩類，非常返態(tài)組成集合，常返態(tài)組成一個閉集。閉集又可按互通關系分為若干個互不相交的基本常返閉集。 含義：一個馬爾可夫鏈如果從中某個非常返態(tài)出發(fā)，它或者一直停留在中，或某一時刻進入某個基本常返閉集，一旦進入就永不離開。一個馬爾可夫鏈如果從某一常返態(tài)出發(fā)，必屬于某個基本常返閉集，永遠在該閉集中運動。4．有限馬爾可夫鏈：一個馬爾可夫鏈的狀態(tài)空間是一個有限集合。性質：①所有非常返態(tài)組成的集合不是閉集；②沒有零常返態(tài)；③必有正常返態(tài)；④狀態(tài)空間，是非常返集合，是正常返集合。不可約有限馬爾可夫鏈只有正常返態(tài)。四．的漸近性質與平穩(wěn)分布1．為什么要研究轉移概率的遍歷性？ 研究當時的極限性質，即的極限分布，包含兩個問題：一是是否存在；二是如果存在，是否與初始狀態(tài)有關。這一類問題稱作遍歷性定理。如果對，存在不依賴于的極限，則稱馬爾可夫鏈具有遍歷性。 一個不可約的馬爾可夫鏈，如果它的狀態(tài)是非周期的正常返態(tài)，則它就是一個遍歷鏈。 具有遍歷性的馬爾可夫鏈，無論系統從哪個狀態(tài)出發(fā)，當轉移步數充分大時，轉移到狀態(tài)的概率都近似等于，這時可以用作為的近似值。2．研究平穩(wěn)分布有什么意義？判別一個不可約的、非周期的、常返態(tài)的馬爾可夫鏈是否為遍歷的，可以通過討論來解決，但求極限時困難的。所以，我們通過研究平穩(wěn)分布是否存在來判別齊次馬爾可夫鏈是否為遍歷鏈。一個不可約非周期常返態(tài)的馬爾可夫鏈是遍歷的充要條件是存在平穩(wěn)分布，且平穩(wěn)分布即極限分布=。3．是齊次馬爾可夫鏈，狀態(tài)空間為，一步轉移概率為，概率分布稱為馬爾可夫鏈的平穩(wěn)分布，滿足4．定理：不可約非周期馬爾可夫鏈是正常返的充要條件是存在平穩(wěn)分布，且此平穩(wěn)分布就是極限分布。 推論：有限狀態(tài)的不可約非周期馬爾可夫鏈必存在平穩(wěn)分布。5．在工程技術中，當馬爾可夫鏈極限分布存在，它的遍歷性表示一個系統經過相當長時間后達到平衡狀態(tài)，此時系統各狀態(tài)的概率分布不隨時間而變，也不依賴于初始狀態(tài)。6．對有限馬爾可夫鏈，如果存在正整數，使，即k步轉移矩陣中沒有零元素，則該鏈是遍歷的。第六章 平穩(wěn)隨機過程一
環(huán)評公示相關推薦
鄂ICP備17016276號-1