神经网络基础知识课件.pptxVIP

神經網路基礎知識

神經生理學和神經解剖學的研究結果表明，神經元(Neuron)是腦組織的基本單元，是人腦資訊處理系統的最小單元。生物神經元生物神經網路2.1人工神經網路的生物學基礎

2.1.1生物神經元生物神經元在結構上由:細胞體(Cellbody)、樹突(Dendrite)、軸突(Axon)、突觸(Synapse)四部分組成。用來完成神經元間資訊的接收、傳遞和處理。人工神經網路的生物學基礎

人工神經網路的生物學基礎

2.1.2生物神經元的資訊處理機理一、資訊的產生神經元間資訊的產生、傳遞和處理是一種電化學活動。神經元狀態：靜息興奮抑制膜電位：極化去極化超極化人工神經網路的生物學基礎

人工神經網路的生物學基礎

2.1.2生物神經元的資訊處理機理二資訊的傳遞與接收人工神經網路的生物學基礎

2.1.2生物神經元的資訊處理機理三、資訊的整合空間整合：同一時刻產生的刺激所引起的膜電位變化，大致等於各單獨刺激引起的膜電位變化的代數和。時間整合：各輸入脈衝抵達神經元的時間先後不一樣。總的突觸後膜電位為一段時間內的累積。人工神經網路的生物學基礎

2.1.3生物神經網路由多個生物神經元以確定方式和拓撲結構相互連接即形成生物神經網路。生物神經網路的功能不是單個神經元資訊處理功能的簡單疊加。神經元之間的突觸連接方式和連接強度不同並且具有可塑性，這使神經網路在宏觀呈現出千變萬化的複雜的資訊處理能力。人工神經網路的生物學基礎

2.2神經元的人工模型 神經元及其突觸是神經網路的基本器件。因此，模擬生物神經網路應首先模擬生物神經元人工神經元(節點) 從三個方面進行模擬:節點本身的資訊處理能力節點與節點之間連接(拓撲結構)相互連接的強度(通過學習來調整)決定人工神經網路整體性能的三大要素

節點本身的資訊處理能力(數學模型)節點與節點之間連接(拓撲結構)相互連接的強度(通過學習來調整)神經元的人工模型

2.2.1神經元的建模(1)每個神經元都是一個多輸入單輸出的資訊處理單元；(2)神經元輸入分興奮性輸入和抑制性輸入兩種類型；(6)神經元本身是非時變的，即其突觸時延和突觸強度均為常數。(3)神經元具有空間整合特性和閾值特性；(4)神經元輸入與輸出間有固定的時滯,主要取決於突觸延擱；(5)忽略時間整合作用和不應期；模型的六點假設：神經元的人工模型

假設1：多輸入單輸出圖(a)表明，正如生物神經元有許多激勵輸入一祥，人工神經元也應該有許多的輸入信號，圖中每個輸入的大小用確定數值xi表示，它們同時輸入神經元j，神經元的單輸出用oj表示。神經元的人工模型

假設2：輸入類型：興奮性和抑制性生物神經元具有不同的突觸性質和突觸強度，其對輸入的影響是使有些輸入在神經元產生脈衝輸出過程中所起的作用比另外一些輸入更為重要。圖(b)中對神經元的每一個輸入都有一個加權係數wij，稱為權重值，其正負模擬了生物神經元中突觸的興奮和抑制，其大小則代表了突觸的不同連接強度。神經元的人工模型

假設3：空间整合特性和阈值特性作為ANN的基本處理單元，必須對全部輸入信號進行整合，以確定各類輸入的作用總效果，圖(c)表示組合輸人信號的“總和值”，相應於生物神經元的膜電位。神經元啟動與否取決於某一閾值電平，即只有當其輸入總和超過閾值時,神經元才被啟動而發放脈衝,否則神經元不會產生輸出信號。神經元的人工模型

神經元的輸出圖(d)人工神經元的輸出也同生物神經元一樣僅有一個，如用oj表示神經元輸出，則輸出與輸入之間的對應關係可用圖(d)中的某種非線性函數來表示，這種函數一般都是非線性的。神經元的人工模型

神經元模型示意圖神經元的人工模型

2.2.2神經元的數學模型τij——輸入輸出間的突觸時延；Tj——神經元j的閾值；wij——神經元i到j的突觸連接係數或稱權重值；f()——神經元轉移函數。(2.1)(2.2)神經元的人工模型

(2.3)net’j=WjTXWj=(w1w2…wn)TX=(x1x2…xn)T令x0=-1，w0=Tj則有-Tj=x0w0(2.4)2.2.2神經元的數學模型神經元的人工模型

(2.5)oj=f(netj)=f(WjTX)(2.6)2.2.2神經元的數學模型神經元的人工模型

2.2.3神經元的轉移函數 神經元各種不同數學模型的主要區別在於採用了不同的轉移函數，從而使神經元具有不同的資訊處理特性。神經元的資訊處理特性是決定人工神經網路整體性能的三大要素之一，反映了神經元輸出與其啟動狀態之間的關係，最常用