The limitations of deep learning

出處:https://blog.keras.io/the-limitations-of-deep-learning.html

1.從幾何角度看DL

meaning(text/image..) -> vectors -> geometric spaces->learning geometric transformations?

局限:geometric transformations 關(guān)鍵在于可微(通過(guò)梯度下降學(xué)習(xí)參數(shù))攘宙,從inputs到outputs ?必須是光滑且連續(xù)的。

2.

DL本質(zhì):a chain of simple, continuous geometric transformations?mapping one vector space into another

但凡需要推理的螟左,如果編程黎休、應(yīng)用科學(xué)方法、長(zhǎng)期計(jì)劃等,甚至是學(xué)習(xí)一個(gè)升序排序翼虫,都很難。

現(xiàn)有的DL技術(shù)屡萤,加大數(shù)據(jù)量或是增加層只是表面地減輕這些問(wèn)題珍剑。

3.Neural Network并不真的理解人的思維,不具有人性化死陆,所以有時(shí)會(huì)出現(xiàn)很可笑的結(jié)果

4.Local generalization versus extreme generalization

機(jī)器:Local generalization

人:extreme generalization(抽象思維)

例子:學(xué)習(xí)降落月球參數(shù)(NN依賴大量數(shù)據(jù)招拙,人可以用抽象物理公式和模型)

學(xué)習(xí)駕駛(NN依賴大量數(shù)據(jù),換一座城市需要重新學(xué)習(xí))

總結(jié):現(xiàn)有的成功來(lái)源于continuous geometric transform以及大量人工標(biāo)注數(shù)據(jù)措译。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末别凤,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子领虹,更是在濱河造成了極大的恐慌规哪,老刑警劉巖,帶你破解...
    沈念sama閱讀 216,324評(píng)論 6 498
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件塌衰,死亡現(xiàn)場(chǎng)離奇詭異诉稍,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī)最疆,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,356評(píng)論 3 392
  • 文/潘曉璐 我一進(jìn)店門(mén)均唉,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái),“玉大人肚菠,你說(shuō)我怎么就攤上這事舔箭。” “怎么了?”我有些...
    開(kāi)封第一講書(shū)人閱讀 162,328評(píng)論 0 353
  • 文/不壞的土叔 我叫張陵层扶,是天一觀的道長(zhǎng)箫章。 經(jīng)常有香客問(wèn)我,道長(zhǎng)镜会,這世上最難降的妖魔是什么檬寂? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 58,147評(píng)論 1 292
  • 正文 為了忘掉前任,我火速辦了婚禮戳表,結(jié)果婚禮上桶至,老公的妹妹穿的比我還像新娘。我一直安慰自己匾旭,他們只是感情好镣屹,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,160評(píng)論 6 388
  • 文/花漫 我一把揭開(kāi)白布。 她就那樣靜靜地躺著价涝,像睡著了一般女蜈。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上色瘩,一...
    開(kāi)封第一講書(shū)人閱讀 51,115評(píng)論 1 296
  • 那天伪窖,我揣著相機(jī)與錄音,去河邊找鬼居兆。 笑死覆山,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的泥栖。 我是一名探鬼主播簇宽,決...
    沈念sama閱讀 40,025評(píng)論 3 417
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼聊倔!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起生巡,我...
    開(kāi)封第一講書(shū)人閱讀 38,867評(píng)論 0 274
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤耙蔑,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后孤荣,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體甸陌,經(jīng)...
    沈念sama閱讀 45,307評(píng)論 1 310
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,528評(píng)論 2 332
  • 正文 我和宋清朗相戀三年盐股,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了钱豁。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 39,688評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡疯汁,死狀恐怖牲尺,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤谤碳,帶...
    沈念sama閱讀 35,409評(píng)論 5 343
  • 正文 年R本政府宣布溃卡,位于F島的核電站,受9級(jí)特大地震影響蜒简,放射性物質(zhì)發(fā)生泄漏瘸羡。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,001評(píng)論 3 325
  • 文/蒙蒙 一搓茬、第九天 我趴在偏房一處隱蔽的房頂上張望犹赖。 院中可真熱鬧,春花似錦卷仑、人聲如沸峻村。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 31,657評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)雀哨。三九已至,卻和暖如春私爷,著一層夾襖步出監(jiān)牢的瞬間雾棺,已是汗流浹背。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 32,811評(píng)論 1 268
  • 我被黑心中介騙來(lái)泰國(guó)打工衬浑, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留捌浩,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 47,685評(píng)論 2 368
  • 正文 我出身青樓工秩,卻偏偏與公主長(zhǎng)得像尸饺,于是被迫代替她去往敵國(guó)和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子助币,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,573評(píng)論 2 353

推薦閱讀更多精彩內(nèi)容

  • 今年過(guò)年浪听,帶男朋友回家了。男方帶了六件禮眉菱,其中酒是宣酒10年迹栓,安吉白茶應(yīng)該是四兩,我父親包了一千的紅包俭缓。 下午我去...
    懶貓三娘閱讀 440評(píng)論 0 0
  • 算起來(lái)我們?cè)瓉?lái)已經(jīng)認(rèn)識(shí)這么多年了克伊,七年,多么久的時(shí)光华坦。七年來(lái)我們哭過(guò)笑過(guò)吵過(guò)也鬧過(guò)愿吹,但是跌跌撞撞的我們還是堅(jiān)定的牽...
    WuLi歐尼醬閱讀 283評(píng)論 0 0