stopwords = nltk.corpus.stopwords.words("english")
eng_stopwords = set(stopwords)
def clean_text(text):
text = BeautifulSoup(text, 'html.parser').get_text()
text = re.sub(r'[^a-zA-Z]', ' ', text)
words = text.lower().split()
words = [w for w in words if w not in eng_stopwords]
return ' '.join(words)
預處理
最后編輯于 ：
?著作權歸作者所有,轉載或內(nèi)容合作請聯(lián)系作者
- 文/潘曉璐 我一進店門宝泵，熙熙樓的掌柜王于貴愁眉苦臉地迎上來好啰，“玉大人，你說我怎么就攤上這事儿奶】蛲” “怎么了？”我有些...
- 文/不壞的土叔 我叫張陵闯捎，是天一觀的道長椰弊。 經(jīng)常有香客問我许溅，道長，這世上最難降的妖魔是什么秉版？ 我笑而不...
- 正文 為了忘掉前任贤重，我火速辦了婚禮，結果婚禮上沐飘，老公的妹妹穿的比我還像新娘游桩。我一直安慰自己，他們只是感情好耐朴，可當我...
- 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著盹憎，像睡著了一般筛峭。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上陪每，一...
- 文/蒼蘭香墨 我猛地睜開眼，長吁一口氣：“原來是場噩夢啊……” “哼戏售！你這毒婦竟也來了侨核？” 一聲冷哼從身側響起，我...
- 正文 年R本政府宣布往堡，位于F島的核電站械荷，受9級特大地震影響，放射性物質(zhì)發(fā)生泄漏虑灰。R本人自食惡果不足惜吨瞎，卻給世界環(huán)境...
- 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望穆咐。 院中可真熱鬧颤诀，春花似錦、人聲如沸对湃。這莊子的主人今日做“春日...
- 文/蒼蘭香墨 我抬頭看了看天上的太陽拍柒。三九已至心傀，卻和暖如春，著一層夾襖步出監(jiān)牢的瞬間拆讯，已是汗流浹背脂男。 一陣腳步聲響...
推薦閱讀更多精彩內(nèi)容
- MySQL的預編譯是指在創(chuàng)建數(shù)據(jù)庫對象時就將指定的SQL語句編譯完成肮之，這時SQL語句已經(jīng)被MySQL解析掉缺、審查，所...
- 本文摘自ReactiveCocoa 中奇妙無比的“宏”魔法 對于編譯語言來說戈擒，所有的宏都是在預編譯的時候被展開的眶明，...
- Python 2.7IDE Pycharm 5.0.3MySQL 5.7MySQL Workbench 6.3 前...
- 例子摘自李剛老師的《JavaEE企業(yè)應用實戰(zhàn)（第四版）》661頁 使用aspect中的@Around、@Befor...
