使用結(jié)巴分詞和word2vec對文本處理

由于項目需要,采集了一些助勃藥品或噴劑的商品評論侵贵,總的數(shù)據(jù)量大概是在57W條左右,評論內(nèi)容大概是這樣子的:

性價比很高的卡睦,質(zhì)量很是值得信賴,寶貝非常棒表锻,現(xiàn)在用了這個之后差不多能堅持三十分鐘,特別的歷害显歧,是正品码耐,有保障,效果真是棒棒達
龍水延時噴劑產(chǎn)品不錯敦间,簡直666的飛起來了,噴了兩就可以干個二三十分鐘廓块,硬了很多好多契沫,真的很厲害
延時效果相當?shù)暮茫看问褂昧酥蠖寄茏?0分鐘以上拴清,做的太舒服了会通,老婆都說用了這個好幸福的
有延時效果極好,每次使用這個延時噴劑涕侈,都有40分鐘以上,感覺真的超棒的木张,也是非常的舒服岸巳!
效果相當好郊闯,原來10來分鐘浮声,昨天收到貨,晚上下班回去然痊,試了下,延時30分鐘不是問題
試了下剧浸,延時效果不錯,物流速度也是好評哈嫌变,性價比挺好的
好評躬它!效果很好!持久不麻木
用的非常好倘待,非常感謝店家!

一行數(shù)據(jù)就是一條評論凸舵,使用python結(jié)巴分詞:

' '.join(jieba.cut(txt))

得到以下結(jié)果:

性價比 很 高 的 失尖, 質(zhì)量 很 是 值得 信賴 , 寶貝 非常 棒 菇夸, 現(xiàn)在 用 了 這個 之后 差不多 能 堅持 三十分鐘 胧辽, 特別 的 歷害 , 是 正品 邑商, 有 保障 , 效果 真是 棒棒 達
龍 水 延時 噴劑 產(chǎn)品 不錯 吭从, 簡直 666 的 飛 起來 了 恶迈, 噴 了 兩 就 可以 干個 二三十 分鐘 谱醇, 硬 了 很多 好多 步做, 真的 很 厲害
延時 效果 相當 的 好 , 每次 使用 了 之后 都 能 做 30 分鐘 以上 煮剧, 做 的 太 舒服 了 将鸵, 老婆 都 說 用 了 這個 好 幸福 的
有 延時 效果 極好 , 每次 使用 這個 延時 噴劑 草娜, 都 有 40 分鐘 以上 , 感覺 真的 超棒 的 宰闰, 也 是 非常 的 舒服 啊 凸克!
效果 相當 好 , 原來 10 來 分鐘 咐容, 昨天 收到 貨 , 晚上 下班 回去 蚂维, 試 了 下 , 延時 30 分鐘 不是 問題
試 了 下 蔚约, 延時 效果 不錯 涂籽, 物流 速度 也 是 好評 哈 , 性價比 挺 好 的
好評 评雌! 效果 很 好 ! 持久 不 麻木
用 的 非常 好 砂轻, 非常感謝 店家 斤吐!

把分詞結(jié)果保存為utf8格式的文本文件厨喂,然后使用word2vec來訓練模型:

from gensim.models import word2vec
s=word2vec.Text8Corpus('result.txt')
model=word2vec.Word2Vec(s)#這里使用默認的參數(shù)訓練

訓練完之后主要是用來查看相似的詞蜕煌,如下:

model.most_similar(u'灼熱感',topn=20)
#相似詞結(jié)果列表
#'熱感',0.6933082342147827
#'麻麻',0.6547691822052002
#'火辣',0.651293158531189
#'辣辣的',0.651107668876648
#'灼燒',0.6483184099197388
#'刺痛',0.6444294452667236
#'燒',0.643839418888092
#'刺激性',0.6332861185073853
#'火辣辣',0.631696343421936
#'微微',0.6278106570243835
#'麻木感',0.6217052936553955
#'灼熱',0.6207054853439331
#'辣感',0.6127525568008423
#'發(fā)熱',0.6119084358215332
#'起色',0.600088357925415
#'涼爽',0.5898377895355225
#'辣',0.589654803276062
#'點點',0.5883890390396118
#'燒灼感',0.583778977394104
#'熱',0.5823389291763306

然后我們再可以根據(jù)這些詞語做一個詞頻統(tǒng)計:

灼熱感抒痒,113
麻麻,730
火辣,69
辣辣的颁独,159
灼燒,73
刺痛誓酒,180
刺激性,412
麻木感寨辩,2867
灼熱歼冰,39
辣感,10
發(fā)熱隔嫡,518
起色,40
涼爽梢杭,73

做出圖表可以看出是這樣子的:


男性助勃用品使用感受(部分)

從圖表上我們可以直觀的看出,超過一半以上的評論描述使用后jj表現(xiàn)為麻木感磕诊、發(fā)熱和刺痛。。。
當然,這里的數(shù)據(jù)和圖表僅是部分展示均澳,還并沒有做更多的詞語挖掘和整理符衔,僅做參考糟袁。。形帮。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末周叮,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子合冀,更是在濱河造成了極大的恐慌,老刑警劉巖君躺,帶你破解...
    沈念sama閱讀 212,718評論 6 492
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件棕叫,死亡現(xiàn)場離奇詭異奕删,居然都是意外死亡,警方通過查閱死者的電腦和手機急侥,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,683評論 3 385
  • 文/潘曉璐 我一進店門坏怪,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人铝宵,你說我怎么就攤上這事∽鹨希” “怎么了?”我有些...
    開封第一講書人閱讀 158,207評論 0 348
  • 文/不壞的土叔 我叫張陵横朋,是天一觀的道長琴锭。 經(jīng)常有香客問我晰甚,道長厕九,這世上最難降的妖魔是什么地回? 我笑而不...
    開封第一講書人閱讀 56,755評論 1 284
  • 正文 為了忘掉前任,我火速辦了婚禮畅买,結(jié)果婚禮上细睡,老公的妹妹穿的比我還像新娘。我一直安慰自己纹冤,他們只是感情好萌京,可當我...
    茶點故事閱讀 65,862評論 6 386
  • 文/花漫 我一把揭開白布宏浩。 她就那樣靜靜地躺著,像睡著了一般求妹。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上制恍,一...
    開封第一講書人閱讀 50,050評論 1 291
  • 那天神凑,我揣著相機與錄音,去河邊找鬼鹃唯。 笑死,一個胖子當著我的面吹牛坡慌,可吹牛的內(nèi)容都是我干的藻三。 我是一名探鬼主播跪者,決...
    沈念sama閱讀 39,136評論 3 410
  • 文/蒼蘭香墨 我猛地睜開眼坑夯,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了柜蜈?” 一聲冷哼從身側(cè)響起指巡,我...
    開封第一講書人閱讀 37,882評論 0 268
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎秘噪,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體指煎,經(jīng)...
    沈念sama閱讀 44,330評論 1 303
  • 正文 獨居荒郊野嶺守林人離奇死亡至壤,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 36,651評論 2 327
  • 正文 我和宋清朗相戀三年枢纠,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片晋渺。...
    茶點故事閱讀 38,789評論 1 341
  • 序言:一個原本活蹦亂跳的男人離奇死亡木西,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出户魏,到底是詐尸還是另有隱情,我是刑警寧澤叼丑,帶...
    沈念sama閱讀 34,477評論 4 333
  • 正文 年R本政府宣布鸠信,位于F島的核電站,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏葬凳。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 40,135評論 3 317
  • 文/蒙蒙 一火焰、第九天 我趴在偏房一處隱蔽的房頂上張望胧沫。 院中可真熱鬧,春花似錦绒怨、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,864評論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至疗疟,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間秃嗜,已是汗流浹背顿膨。 一陣腳步聲響...
    開封第一講書人閱讀 32,099評論 1 267
  • 我被黑心中介騙來泰國打工恋沃, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人囊咏。 一個月前我還...
    沈念sama閱讀 46,598評論 2 362
  • 正文 我出身青樓,卻偏偏與公主長得像霜第,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子泌类,可洞房花燭夜當晚...
    茶點故事閱讀 43,697評論 2 351

推薦閱讀更多精彩內(nèi)容