word2Vec用來訓(xùn)練詞向量

訓(xùn)練模型

sentences = word2vec.Text8Corpus(input_corpus)# 加載語料,input_corpus 為路徑

#常用參數(shù)介紹: size詞向量維度、window滑動(dòng)窗口大小上下文最大距離、min_count最小詞頻數(shù)仅讽、iter隨機(jī)梯度下降迭代最小次數(shù)

model = word2vec.Word2Vec(sentences, size=100, window=8, min_count=3, iter=8)

模型訓(xùn)練結(jié)果

中國2.4051034 2.347189 2.1492286 2.36416 3.3391545 2.7728064 2.1600752 -0.97178006 3.3161209 -1.4273282 -1.460929 1.7023774 0.39640304 0.92302006 -0.44064146 -1.2462761 0.71472687 -2.0091395 -1.1625484 1.9183346 1.3589659 4.492623 -0.06471016 -0.67374414 0.5702634 -0.04561443 2.6501563 -0.6086548 -1.8949013 2.2059002 3.5559614 2.8981128 -0.37763736 -1.7835602 -1.0494096 1.8594857 -1.0929657 2.1960757 -2.266795 -3.6154387 1.9028498 1.5598435 -0.16755931 -2.4086187 4.748276 -2.827977 2.9857802 5.122005 0.7531201 2.049602 -0.5398894 -3.319249 -0.37066358 0.16588122 1.8525156 -4.531679 -1.2304896 -2.8112302 2.799388 -0.1128152 -0.9057815 1.0820556 -3.2845974 -0.34189522 2.1741004 -2.8306067 1.2236092 0.39991888 0.03834511 3.3192902 -1.5873901 -1.866539 -0.11960881 0.010244962 0.16474022 2.6132228 1.2568957 -1.685334 1.9155722 -1.5563394 -1.9100558 -2.6324818 3.0862947 -0.33642867 1.5173916 -2.5618932 -5.528164 1.9867828 0.43513966 0.24367392 -0.6689725 1.7407004 -4.5762343 0.41930607 -2.1844933 1.5136248 -0.33260316 0.58439684 -4.691953 -1.5455776

模型調(diào)用舉例

model = KeyedVectors.load_word2vec_format(model_path)

print('similarity(美國,美元) = {}'.format(model.similarity("美國", "美元")))

print('similarity(美國,不錯(cuò)) = {}'.format(model.similarity("不錯(cuò)", "糟糕")))

most_sim = model.most_similar("美國", topn=10)

print('The top10 of 美國: {}'.format(most_sim))

輸入結(jié)果:

similarity(美國丰嘉,美元) = 0.3204698849918094

similarity(美國,不錯(cuò)) = 0.10450708907409183

The top10 of 美國: [('英國', 0.6424108147621155), ('納扎爾巴耶夫', 0.6381773352622986), ('戈?duì)柊蛦谭?, 0.6322702169418335), ('各國', 0.6312756538391113), ('沙特', 0.6292957067489624), ('江布爾', 0.6286799907684326), ('澳', 0.6259944438934326), ('獨(dú)立', 0.6243587136268616), ('烏克蘭', 0.621656060218811), ('澳大利亞', 0.6174627542495728)]

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末嚷缭,一起剝皮案震驚了整個(gè)濱河市饮亏,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌阅爽,老刑警劉巖路幸,帶你破解...
    沈念sama閱讀 219,490評(píng)論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異付翁,居然都是意外死亡简肴,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,581評(píng)論 3 395
  • 文/潘曉璐 我一進(jìn)店門百侧,熙熙樓的掌柜王于貴愁眉苦臉地迎上來砰识,“玉大人,你說我怎么就攤上這事移层∪院玻” “怎么了?”我有些...
    開封第一講書人閱讀 165,830評(píng)論 0 356
  • 文/不壞的土叔 我叫張陵观话,是天一觀的道長(zhǎng)予借。 經(jīng)常有香客問我,道長(zhǎng),這世上最難降的妖魔是什么灵迫? 我笑而不...
    開封第一講書人閱讀 58,957評(píng)論 1 295
  • 正文 為了忘掉前任秦叛,我火速辦了婚禮,結(jié)果婚禮上瀑粥,老公的妹妹穿的比我還像新娘挣跋。我一直安慰自己,他們只是感情好狞换,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,974評(píng)論 6 393
  • 文/花漫 我一把揭開白布避咆。 她就那樣靜靜地躺著,像睡著了一般修噪。 火紅的嫁衣襯著肌膚如雪查库。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,754評(píng)論 1 307
  • 那天黄琼,我揣著相機(jī)與錄音樊销,去河邊找鬼。 笑死脏款,一個(gè)胖子當(dāng)著我的面吹牛围苫,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播撤师,決...
    沈念sama閱讀 40,464評(píng)論 3 420
  • 文/蒼蘭香墨 我猛地睜開眼剂府,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來了丈氓?” 一聲冷哼從身側(cè)響起周循,我...
    開封第一講書人閱讀 39,357評(píng)論 0 276
  • 序言:老撾萬榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎万俗,沒想到半個(gè)月后湾笛,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,847評(píng)論 1 317
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡闰歪,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,995評(píng)論 3 338
  • 正文 我和宋清朗相戀三年嚎研,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片库倘。...
    茶點(diǎn)故事閱讀 40,137評(píng)論 1 351
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡临扮,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出教翩,到底是詐尸還是另有隱情杆勇,我是刑警寧澤,帶...
    沈念sama閱讀 35,819評(píng)論 5 346
  • 正文 年R本政府宣布饱亿,位于F島的核電站蚜退,受9級(jí)特大地震影響闰靴,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜钻注,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,482評(píng)論 3 331
  • 文/蒙蒙 一蚂且、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧幅恋,春花似錦杏死、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,023評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至零渐,卻和暖如春窒舟,著一層夾襖步出監(jiān)牢的瞬間系忙,已是汗流浹背诵盼。 一陣腳步聲響...
    開封第一講書人閱讀 33,149評(píng)論 1 272
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留银还,地道東北人风宁。 一個(gè)月前我還...
    沈念sama閱讀 48,409評(píng)論 3 373
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像蛹疯,于是被迫代替她去往敵國和親戒财。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,086評(píng)論 2 355

推薦閱讀更多精彩內(nèi)容