2018-05-09 D2 1.3解析庫的安裝

1.3 解析庫的安裝

解析庫:lxml滨砍, Beautiful Soup, pyquery

解析方法:Xpath解析和CSS選擇器解析

1.3.1 lxml的安裝

lxml是Python的一個解析庫,支持HTML和XML解析研侣,支持Xpath解析方式,而且解析效率非常高

1.3.3 pyquery的安裝

pyquery同樣是一個強大的網(wǎng)頁解析工具炮捧,它提供了和jQuery類似的語法來解析HTML文檔庶诡,支持CSS選擇器。

1.3.4 tesserocr的安裝

OCR Optical Character Recongition, 光學(xué)字符識別咆课。

tesserocr是Python的一個OCR識別庫末誓,但其實是對tesseract做的一層Python API封裝,核心還是tesseract书蚪。

1.4 數(shù)據(jù)庫的安裝

關(guān)系型數(shù)據(jù)庫 SQLite, MySQL, Oracle, SQL Server, DB2? 以表的形式儲存

非關(guān)系型數(shù)據(jù)庫 MongoDB, Redis 以鍵值對的形式儲存

主要用到了MySQL 還有MongoDB, Redis.

1.42 MongoDB的安裝

MongoDB是C++編寫的非關(guān)系數(shù)據(jù)庫喇澡,是一個基于分布式文件存儲的開源數(shù)據(jù)庫系統(tǒng),其內(nèi)容存儲形式類似JSON對象殊校,它的字段值可以包含其他文檔晴玖,數(shù)組及文檔數(shù)組,非常靈活。

1.4.3 Redis的安裝

Redis是一個基于內(nèi)存的高效的非關(guān)系型數(shù)據(jù)庫

1.5 存儲庫的安裝

安裝了數(shù)據(jù)庫呕屎,還得安裝存儲庫宪萄,跟python交互

MySQL需要PyMySQL? ? ?MongoDB需要PyMongo

1.5.1 PyMySQL的安裝

pip install pymysql

1.5.2 PyMongo的安裝

pip install pymongo

1.5.3 redis-py的安裝

pip install redis

1.5.4 RedisDump的安裝

RedisDump是一個用于Redis數(shù)據(jù)導(dǎo)入/導(dǎo)出的工具,基于Ruby實現(xiàn)的榨惰,所以要安裝RedisDump拜英,需要先安裝Ruby。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末琅催,一起剝皮案震驚了整個濱河市居凶,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌藤抡,老刑警劉巖侠碧,帶你破解...
    沈念sama閱讀 212,884評論 6 492
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異缠黍,居然都是意外死亡弄兜,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,755評論 3 385
  • 文/潘曉璐 我一進店門瓷式,熙熙樓的掌柜王于貴愁眉苦臉地迎上來替饿,“玉大人,你說我怎么就攤上這事贸典∈勇” “怎么了?”我有些...
    開封第一講書人閱讀 158,369評論 0 348
  • 文/不壞的土叔 我叫張陵廊驼,是天一觀的道長据过。 經(jīng)常有香客問我,道長妒挎,這世上最難降的妖魔是什么绳锅? 我笑而不...
    開封第一講書人閱讀 56,799評論 1 285
  • 正文 為了忘掉前任,我火速辦了婚禮酝掩,結(jié)果婚禮上鳞芙,老公的妹妹穿的比我還像新娘。我一直安慰自己庸队,他們只是感情好积蜻,可當(dāng)我...
    茶點故事閱讀 65,910評論 6 386
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著彻消,像睡著了一般。 火紅的嫁衣襯著肌膚如雪宙拉。 梳的紋絲不亂的頭發(fā)上宾尚,一...
    開封第一講書人閱讀 50,096評論 1 291
  • 那天,我揣著相機與錄音,去河邊找鬼煌贴。 笑死御板,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的牛郑。 我是一名探鬼主播怠肋,決...
    沈念sama閱讀 39,159評論 3 411
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼淹朋!你這毒婦竟也來了笙各?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 37,917評論 0 268
  • 序言:老撾萬榮一對情侶失蹤础芍,失蹤者是張志新(化名)和其女友劉穎杈抢,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體仑性,經(jīng)...
    沈念sama閱讀 44,360評論 1 303
  • 正文 獨居荒郊野嶺守林人離奇死亡惶楼,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 36,673評論 2 327
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了诊杆。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片歼捐。...
    茶點故事閱讀 38,814評論 1 341
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖晨汹,靈堂內(nèi)的尸體忽然破棺而出窥岩,到底是詐尸還是另有隱情,我是刑警寧澤宰缤,帶...
    沈念sama閱讀 34,509評論 4 334
  • 正文 年R本政府宣布颂翼,位于F島的核電站,受9級特大地震影響慨灭,放射性物質(zhì)發(fā)生泄漏朦乏。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 40,156評論 3 317
  • 文/蒙蒙 一氧骤、第九天 我趴在偏房一處隱蔽的房頂上張望呻疹。 院中可真熱鬧,春花似錦筹陵、人聲如沸刽锤。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,882評論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽并思。三九已至,卻和暖如春语稠,著一層夾襖步出監(jiān)牢的瞬間宋彼,已是汗流浹背弄砍。 一陣腳步聲響...
    開封第一講書人閱讀 32,123評論 1 267
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留输涕,地道東北人音婶。 一個月前我還...
    沈念sama閱讀 46,641評論 2 362
  • 正文 我出身青樓,卻偏偏與公主長得像莱坎,于是被迫代替她去往敵國和親衣式。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 43,728評論 2 351

推薦閱讀更多精彩內(nèi)容

  • # Python 資源大全中文版 我想很多程序員應(yīng)該記得 GitHub 上有一個 Awesome - XXX 系列...
    aimaile閱讀 26,454評論 6 428
  • # Python 資源大全中文版 我想很多程序員應(yīng)該記得 GitHub 上有一個 Awesome - XXX 系列...
    小邁克閱讀 2,967評論 1 3
  • Python常用庫大全檐什,看看有沒有你需要的碴卧。 環(huán)境管理 管理 Python 版本和環(huán)境的工具 p – 非常簡單的交...
    XDgbh閱讀 15,854評論 4 147
  • 前幾日,和許久未見的老同學(xué)朋友一一約見厢汹,不同于曾經(jīng)的脾氣笑臉螟深,我更多體會到的是一種和聲細語,一種很微妙的成熟的平和...
    NeverlanDpush閱讀 238評論 0 0
  • 抗流感病毒藥物烫葬,只推薦神經(jīng)氨酸酶抑制劑(NAI)界弧,對甲型、乙型流感均有效搭综,包括奧司他韋(達菲)垢箕、扎那米韋、帕拉米韋...
    清澈與明亮閱讀 211評論 0 0