python 數(shù)據(jù)挖掘篇 一 結(jié)巴分詞

Python安裝

python學(xué)習(xí) 一 python語法,及變量類型

python學(xué)習(xí) 二 爬一個圖片網(wǎng)站上

python學(xué)習(xí) 二 02 爬一個圖片網(wǎng)站芳肌,獲得主鏈接網(wǎng)址,并保存

python學(xué)習(xí) 二 03 爬一個圖片網(wǎng)站-獲得所有分頁網(wǎng)址

python學(xué)習(xí) 二 04 爬一個圖片網(wǎng)站-解析文件,獲得所有圖片鏈接

python學(xué)習(xí) 二 05 爬一個圖片網(wǎng)站-下載圖片鏈接

python學(xué)習(xí) 二 06 爬一個圖片網(wǎng)站-多線程方式下載

python學(xué)習(xí) 三 01 再爬一個網(wǎng)站胧洒,幾行代碼亭敢,搞定分類類別

python學(xué)習(xí) 三 02 再爬一個網(wǎng)站滚婉,獲得所有分頁

python學(xué)習(xí) 三 03 再爬一個網(wǎng)站,根據(jù)分頁帅刀,下載圖片

python學(xué)習(xí) 三 04 圖片爬蟲工程-組織框架

Python 爬蟲 上篇

Python 爬蟲 下篇


python 數(shù)據(jù)挖掘篇 一 結(jié)巴分詞

python 數(shù)據(jù)挖掘篇 二 詞云統(tǒng)計

python 數(shù)據(jù)挖掘篇 三 gensim 使用

python 數(shù)據(jù)挖掘篇四 小說數(shù)據(jù)挖掘?qū)嵗?/a>



Python 數(shù)據(jù)挖掘?qū)W習(xí)

一 結(jié)巴分詞

github地址:https://github.com/fxsjy/jieba

"結(jié)巴"中文分詞:做最好的 Python 中文分詞組件

還記得當(dāng)時想用C++让腹,實現(xiàn)分詞远剩,資料那個難找,調(diào)試那個麻煩骇窍,BUG那個多瓜晤,說多了都是淚,開始入手python 數(shù)據(jù)挖掘腹纳,看看這個能簡單不痢掠。

安裝

這種效率比c++安裝分詞庫 方便多了。

使用

詞性標(biāo)注

常用的一些符號及詞性的對應(yīng)關(guān)系為:a:形容詞c:連詞d:副詞e:嘆詞f:方位詞i:成語m:數(shù)詞n:名詞nr:人名ns:地名nt:機構(gòu)團體nz:其他專有名詞p:介詞r:代詞t:時間u:助詞v:動詞vn:名動詞w:標(biāo)點符號un:未知詞語

更詳細(xì)資料 可以搜索 計算所漢語詞性標(biāo)記集

一個自定義字典的例子:

注意要用:UTF-8格式保存

基本用法

1只估、?基本分詞

2志群、?根據(jù)詞性屬性分詞

創(chuàng)建字典

UTF-8格式保存

3、?提取關(guān)鍵字

4蛔钙、?返回詞語位置

  • 序言:七十年代末锌云,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子吁脱,更是在濱河造成了極大的恐慌桑涎,老刑警劉巖,帶你破解...
    沈念sama閱讀 218,941評論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件兼贡,死亡現(xiàn)場離奇詭異攻冷,居然都是意外死亡,警方通過查閱死者的電腦和手機遍希,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,397評論 3 395
  • 文/潘曉璐 我一進店門等曼,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人凿蒜,你說我怎么就攤上這事禁谦。” “怎么了废封?”我有些...
    開封第一講書人閱讀 165,345評論 0 356
  • 文/不壞的土叔 我叫張陵州泊,是天一觀的道長。 經(jīng)常有香客問我漂洋,道長遥皂,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,851評論 1 295
  • 正文 為了忘掉前任刽漂,我火速辦了婚禮演训,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘贝咙。我一直安慰自己仇祭,他們只是感情好,可當(dāng)我...
    茶點故事閱讀 67,868評論 6 392
  • 文/花漫 我一把揭開白布颈畸。 她就那樣靜靜地躺著乌奇,像睡著了一般没讲。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上礁苗,一...
    開封第一講書人閱讀 51,688評論 1 305
  • 那天爬凑,我揣著相機與錄音,去河邊找鬼试伙。 笑死嘁信,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的疏叨。 我是一名探鬼主播潘靖,決...
    沈念sama閱讀 40,414評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼蚤蔓!你這毒婦竟也來了卦溢?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 39,319評論 0 276
  • 序言:老撾萬榮一對情侶失蹤秀又,失蹤者是張志新(化名)和其女友劉穎单寂,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體吐辙,經(jīng)...
    沈念sama閱讀 45,775評論 1 315
  • 正文 獨居荒郊野嶺守林人離奇死亡宣决,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,945評論 3 336
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了昏苏。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片尊沸。...
    茶點故事閱讀 40,096評論 1 350
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖贤惯,靈堂內(nèi)的尸體忽然破棺而出洼专,到底是詐尸還是另有隱情,我是刑警寧澤救巷,帶...
    沈念sama閱讀 35,789評論 5 346
  • 正文 年R本政府宣布,位于F島的核電站句柠,受9級特大地震影響浦译,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜溯职,卻給世界環(huán)境...
    茶點故事閱讀 41,437評論 3 331
  • 文/蒙蒙 一精盅、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧谜酒,春花似錦叹俏、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,993評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽屡谐。三九已至,卻和暖如春蝌数,著一層夾襖步出監(jiān)牢的瞬間愕掏,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 33,107評論 1 271
  • 我被黑心中介騙來泰國打工顶伞, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留饵撑,地道東北人。 一個月前我還...
    沈念sama閱讀 48,308評論 3 372
  • 正文 我出身青樓唆貌,卻偏偏與公主長得像滑潘,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子锨咙,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 45,037評論 2 355

推薦閱讀更多精彩內(nèi)容