神經(jīng)網(wǎng)絡建模ppt課件(已修改)
2025-01-17 15:32 本頁面
【正文】 人工神經(jīng)網(wǎng)絡建模 數(shù)學與信息科學系 神經(jīng)網(wǎng)絡簡介 人工神經(jīng)網(wǎng)絡是在現(xiàn)代神經(jīng)科學的基礎上發(fā)展起來的，旨在模擬人腦結(jié)構(gòu)以及功能的一種抽象的數(shù)學模型 ,其中 Hopfield神經(jīng)網(wǎng)絡、 ART神經(jīng)網(wǎng)絡、 BP神經(jīng)網(wǎng)絡是常用的網(wǎng)絡。 ?Hopfield神經(jīng)網(wǎng)絡是由相同的神經(jīng)元構(gòu)成的單元，是一類不具有學習能力的單層自聯(lián)想網(wǎng)絡，她的網(wǎng)絡模型由一組可使某一個能量函數(shù)最小的微分方程組成。 ?ART神經(jīng)網(wǎng)絡主要用于模式識別，她的不足之處在于對轉(zhuǎn)換、失真和規(guī)模變化較敏感 ?BP神經(jīng)網(wǎng)絡是誤差反向傳播的多層前向網(wǎng)絡 ,其信息處理機制由神經(jīng)元激活特性和網(wǎng)絡拓撲結(jié)構(gòu)決定 ,神經(jīng)元的傳遞函數(shù)是非線性函數(shù) ,網(wǎng)絡結(jié)構(gòu)由輸入層、隱含層、輸出層組成 ,同層節(jié)點間無關(guān)聯(lián) ,異層節(jié)點前向連接。 、人工神經(jīng)元模型 人工神經(jīng)網(wǎng)絡的基本單元的神經(jīng)元模型 人工神經(jīng)元的三個要素 10003( ) ,( ) , ( 0 = = )ijmij iij j jmj ij i j j jiwwxby f w x i w w???????? ? ????1 、 一 組 連 接 （ 突 觸 ） ， 連 接 強 度 由 各 連 接 上 的 權(quán) 值 表 示 ， 權(quán) 值 為 正 表示 激 活 ， 負 表 示 抑 制2 、 一 個 求 和 單 元 ， 用 于 求 取 各 輸 入 信 號 之 間 的 加 權(quán) 和、 一 個 非 線 性 激 活 函 數(shù) f ， 起 到 非 線 性 映 射 的 作 用 并 將 神 經(jīng) 元 的 輸 出 限 制在 一 定 范 圍 內(nèi)還 有 閾 值 或 偏 置 可 通 過 把 輸 入 維 數(shù) 增 加 一 維 把 閾 值 包 括 進 去對 應 閾 值 ， 1 或 偏 置 1（傳遞）函數(shù)的取法 在 Matlab工具箱里包括了許多激活（傳遞）函數(shù)。在“ Transfer Function Graphs” 中可以找到它們的完全列表 函數(shù)名 功 能 purelin 線性傳遞函數(shù) hardlim 硬限幅遞函數(shù) hardlims 對稱硬限幅遞函數(shù) satli 飽和線性傳遞函數(shù) satlins 對稱飽和線性傳遞函數(shù) logsig 對數(shù) S 形傳遞函數(shù) tansig 正切 S 形傳遞函數(shù) radbas 徑向基傳遞函數(shù) pet 競爭層傳遞函數(shù) 222211 , 0 1 , 01 ( ) ( )0 , 0 1 , 02 ( ) t a nh ( ),03 ( ) 10 , 014 ( ) e xp ( )2xxxxnj jiiixxf x f xxxeef x xeexxsi gmo i d f x xxf x x x????????????? ? ??????????? ???????? ? ??????、 階 躍 函 數(shù) ： ， 或 符 號 函 數(shù)、 雙 曲 正 切 函 數(shù) ：、 函 數(shù) （ S 型 ） ：、 高 斯 函 數(shù) ：、網(wǎng)絡結(jié)構(gòu)以及工作方式 從連接方式看 NN主要有兩種網(wǎng)絡拓撲結(jié)構(gòu)： ? 前饋型網(wǎng)絡：結(jié)點分為輸入單元和計算單元 ? 反饋型網(wǎng)絡：所有結(jié)點都是計算單元 NN的工作過程主要分為兩個階段： 第一階段：學習期，此時個計算單元狀態(tài)不變，各連線上的權(quán)值可通過學習來修改 第二階段：工作期，此時各連接權(quán)值固定，計算各單元狀態(tài)變化 網(wǎng)絡結(jié)構(gòu)：前饋型神經(jīng)網(wǎng)絡 兩個或更多的上面所示的神經(jīng)元可以組合成一層，一個典型的網(wǎng)絡可包括一層或者多層。我們首先來研究神經(jīng)元層。 單層神經(jīng)元網(wǎng)絡 有 R輸入元素和 S個神經(jīng)元組成的單層網(wǎng)絡如下圖所示 n{1}={1,1}*p+{1} 多層神經(jīng)元網(wǎng)絡 上面所示的網(wǎng)絡有 R1個輸入，第一層有 S1個神經(jīng)元，第二層 有 S2個神經(jīng)元 … 中間層的輸出就是下一層的輸入。第二層可看作有 S1個輸入，S2個神經(jīng)元和 S1xS2 階權(quán)重矩陣 W2 的單層網(wǎng)絡。第二層的輸入是 a1，輸出是 a2，現(xiàn)在我們已經(jīng)確定了第二層的所有向量和矩陣，我們就能把它看成一個單層網(wǎng)絡了。其他層也可以照此步驟處理。 多層網(wǎng)絡的功能非常強大。例、一個兩層的網(wǎng)絡，第一層的轉(zhuǎn)移函數(shù)是曲線函數(shù)，第二層的轉(zhuǎn)移函數(shù)是線性函數(shù)，通過訓練，它能夠很好的模擬任何有有限斷點的函數(shù)。這種兩層網(wǎng)絡集中應用于 “ 反向傳播網(wǎng)絡 ” 。 注意 :我們把第三層的輸出 a3標記為 y。我們將使用這種符號來定義這種網(wǎng)絡的輸出。 newp
教學課件相關(guān)推薦
鄂ICP備17016276號-1