1. Capsule的由來 Hinton 注意到的一個(gè)有趣的事實(shí)漠酿,目前大多數(shù)神經(jīng)解剖學(xué)研究都支持(大部分哺乳類,特別是靈長(zhǎng)類)大腦皮層中大量存在...
1. 熵 2. 相對(duì)熵(KL散度) P為樣本的真實(shí)分布龟劲,比如[1,0,0]表示當(dāng)前樣本屬于第一類。Q用來表示模型所預(yù)測(cè)的分布轴或,比如[0.7,0....
1. GAN GAN有兩個(gè)模型昌跌,分別是生成模型和判別模型。這兩個(gè)模型進(jìn)行博弈侮叮,先保持生成模型不變避矢,優(yōu)化判別模型(判別是真實(shí)數(shù)據(jù)還是生成的數(shù)據(jù)),...
處理不均衡數(shù)據(jù)囊榜,有如下幾種方式: 1. 選擇對(duì)不均衡數(shù)據(jù)比較友好的metrics(比如f1, roc审胸、auc): 關(guān)于metrics有如下幾種:...
一. 分詞的類型 1. 基于詞典:基于字典、詞庫匹配 2. 基于統(tǒng)計(jì) 3. 基于理解 二. 基于詞典分詞 1. 正向最大匹配法 其基本思想為:假...
Teaching Machines to Read and Comprehend 1. 模型提出原因: 因?yàn)榭杀挥脕碛?xùn)練的訓(xùn)練數(shù)據(jù)較少卸勺,因此砂沛,有...
《NEURAL MACHINE TRANSLATION BY JOINTLY LEARNING TO ALIGN AND TRANSLATE》閱...
Memory Networks 1. 模型提出的原因 RNN記憶能力(隱藏層和權(quán)重)很弱,像閱讀理解之類的問題沒辦法解決曙求。 2. 模型的結(jié)構(gòu) m...