20xx年醫(yī)學專題—第八篇變形預報人工神經(jīng)網(wǎng)絡(luò)法(編輯修改稿)
2024-11-13 18:02 本頁面
【文章內(nèi)容簡介】 P網(wǎng)絡(luò)訓練收斂標準 （4）BP網(wǎng)絡(luò)的訓練算法,第八頁，共二十頁。,167。8.2 BP網(wǎng)絡(luò)(wǎnglu242。)及其訓練算法,8.2.1 BP網(wǎng)絡(luò)結(jié)構(gòu) 從結(jié)構(gòu)上看，BP網(wǎng)絡(luò)是典型的多層網(wǎng)絡(luò)，它不僅有輸入層結(jié)點、輸出層結(jié)點，而且有一層或多層隱含層結(jié)點。在BP網(wǎng)絡(luò)中，層與層之間多采用全互連方式，但同一層的結(jié)點之間不存在相互連接。 一個三層BP網(wǎng)絡(luò)的結(jié)構(gòu)如下圖所示。圖中 表示(biǎosh236。)輸出層的輸出； 表示(biǎosh236。)隱含層的輸出； 表示(biǎosh236。)輸入層的輸入； 表示(biǎosh236。)從隱含層結(jié)點到輸出層節(jié)點的連接權(quán)； 表示從輸入層結(jié)點到隱含層結(jié)點的連接權(quán)；在后面的討論中，小標I、j、k分別表示輸出接點、隱含層結(jié)點和輸入結(jié)點；M、L、N分寫表示輸入結(jié)點、隱含層結(jié)點和輸入結(jié)點的數(shù)量。,第九頁，共二十頁。,從形式看BP網(wǎng)絡(luò)和感知機十分相似，但他們之間存在著重要差別。第一，在多層感知機結(jié)構(gòu)中，只有一層之間的連接權(quán)值可調(diào)，而其他各層之間的連接權(quán)值是固定(g249。d236。ng)的；但在BP網(wǎng)絡(luò)則不同，它的每一層之間的連接權(quán),第十頁，共二十頁。,值都是可調(diào)的。第二，感知機結(jié)構(gòu)中的處理結(jié)點呈線性輸入或輸出(shūchū)關(guān)系，其結(jié)點狀態(tài)為二進制的0和1；而BP網(wǎng)絡(luò)除輸入層處理結(jié)點外，其他層的處理結(jié)點均為非線性輸入或輸出關(guān)系，即要求這些處理結(jié)點的特征函數(shù)應是可微的，這些節(jié)點的激勵函數(shù)通常為S型函數(shù)，其最一般的形式為,參數(shù) 、 與 一樣，可在網(wǎng)絡(luò)學習過程中調(diào)整。不過輸出參數(shù)一般(yībān)都可經(jīng)過某種數(shù)學轉(zhuǎn)換或歸一化到[0,1]區(qū)間，常用BP網(wǎng)絡(luò)的激勵函數(shù)為,式中,第十一頁，共二十頁。,在應用BP網(wǎng)絡(luò)時，必須清楚兩點：第一，網(wǎng)絡(luò)學習過程需要(xūy224。o)正向傳播和反向傳播 ，一但網(wǎng)絡(luò)經(jīng)過訓練用于問題求解，則只需正向傳播，而不需要(xūy224。o)在進行反向傳播；第二，從網(wǎng)絡(luò)學習的角度看，信息在網(wǎng)絡(luò)中的傳播是雙向的，但并不意味著網(wǎng)絡(luò)的層與層之間的連接也是雙向的，因此，誤差反向傳播的BP網(wǎng)絡(luò)是一種前饋網(wǎng)絡(luò)。,8.2.2 誤差反傳訓練(x249。nli224。n)算法,上述BP網(wǎng)絡(luò)的學習過程，具體實施時是依據(jù)誤差從輸出(shūchū)層往輸入層逐層進行權(quán)值修正，所以盡管一系列有關(guān)的公式本質(zhì)上來自梯度算法，但人們常把BP網(wǎng)絡(luò)的學,第十二頁，共二十頁。,,習算法(su224。n fǎ)稱為誤差反傳訓練算法(su224。n fǎ
法律信息相關(guān)推薦
鄂ICP備17016276號-1