- MP神經(jīng)單元
- 多層神經(jīng)單元
- 特點(diǎn)
- 優(yōu)點(diǎn)
- 缺點(diǎn)
MP神經(jīng)單元
關(guān)于平面直線方程h = ax + by +c = 0,等式左邊大于零和小于零分別表示點(diǎn)在直線的一側(cè)還是另一側(cè)伤靠。
那么在n維平面時(shí)艳丛,直線的高維形式稱為超平面荔茬,它的方程式如下:
神經(jīng)元就是當(dāng)h大于0時(shí)輸出1霞揉,h小于0時(shí)輸出0這么一個(gè)模型轻庆,它的實(shí)質(zhì)就是把特征空間一切兩半癣猾,認(rèn)為兩瓣分別屬兩個(gè)類。
這個(gè)模型有點(diǎn)像人腦中的神經(jīng)元:從多個(gè)感受器接受電信號(hào)x1榨了,x2,x3...xn進(jìn)行處理(加權(quán)相加再偏移一點(diǎn)煎谍,即判斷輸入是否在某條直線的一側(cè))發(fā)出電信號(hào)(在正確的那側(cè)發(fā)出1,否則不發(fā)信號(hào)龙屉,可以認(rèn)為是發(fā)出0)呐粘,這就是它叫神經(jīng)元的原因。
MP神經(jīng)單元缺點(diǎn)
1.首先它把直線一側(cè)變?yōu)?转捕,另一側(cè)變?yōu)?作岖,不可微,于是利用平滑的Sigmod函數(shù)(參照邏輯回歸)替代五芝。
2.只能切一刀痘儡。所以我們要引入多層神經(jīng)網(wǎng)絡(luò)。
多層神經(jīng)單元
多層神經(jīng)單元是指底層神經(jīng)元的輸出是高層神經(jīng)元的輸入枢步,每砍一刀沉删,其實(shí)就是使用了一個(gè)神經(jīng)元。
-
圖像表示
下面來看一個(gè)情景醉途,該情景下無法用一超平面進(jìn)行分割矾瑰。
屏幕快照 2018-02-26 下午3.37.18.png
于是我們進(jìn)行空間變化,變成如下情景隘擎。
- 數(shù)學(xué)表示
a()是激活函數(shù)
二層網(wǎng)絡(luò)就是
如何簡(jiǎn)單形象又有趣地講解神經(jīng)網(wǎng)絡(luò)是什么殴穴?
特點(diǎn)
模擬人腦構(gòu)造,構(gòu)造神經(jīng)元
優(yōu)點(diǎn)
(BP)很強(qiáng)的分線性擬合能力,學(xué)習(xí)規(guī)則簡(jiǎn)單采幌,很強(qiáng)的魯棒性劲够,具有記憶能力、自學(xué)能力,誤差反向傳播休傍,并行性好
(RBF)唯一最佳逼近特性征绎,無局部最小問題,前反饋網(wǎng)絡(luò)中RBF網(wǎng)絡(luò)完成映射功能最優(yōu)尊残,分類能力好炒瘸,收斂性比BP快非常多
缺點(diǎn)
沒能力解釋自己的推理過程及依據(jù),數(shù)據(jù)不充分時(shí)寝衫,將無法工作顷扩,初值較敏感(使用AUTO-Encoder)