scrapy安裝過程及爬取books熱門標(biāo)簽過程

![$J{1]S`XNV7P]A3RWB~J7X6.png](http://upload-images.jianshu.io/upload_images/5886630-205a1f5dff6434f0.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)
查看python版本 并且安裝更新名叫virtualenv的工具

V@D8{033$18XJU6}0_8AD~7.png

創(chuàng)造名為 venv的虛擬環(huán)境

16P`XH%8_JA]6N7RC1Y$T`4.png

利用pip通過鏈接來安裝twisted

YW`~1X0T5GK]6UN4]YK`BDM.png

系統(tǒng)的安裝更新

GM5B)18I9FUJ75Z_9XFPGMF.png

安裝四個(gè)工具 結(jié)果發(fā)現(xiàn)系統(tǒng)已經(jīng)安裝有 無需再安裝

Z71)@L@S1K00JL4Z5O9Y`GN.png

新建名為sucong的scrapy工程

AFF2`(6`}Q8S@W28DIK`EGS.png

6)V{1{3H}C0WBI{{7XF2CEA.png

爬取熱門標(biāo)簽books （tag books）下的數(shù)據(jù) 并且保存在sucong.json中

• 人面猴

  序言：七十年代末宦搬，一起剝皮案震驚了整個(gè)濱河市牙瓢，隨后出現(xiàn)的幾起案子，更是在濱河造成了極大的恐慌间校，老刑警劉巖矾克，帶你破解...

  沈念sama閱讀 218,386評(píng)論 6贊 506
• 死咒

  序言：濱河連續(xù)發(fā)生了三起死亡事件，死亡現(xiàn)場(chǎng)離奇詭異憔足，居然都是意外死亡胁附，警方通過查閱死者的電腦和手機(jī)，發(fā)現(xiàn)死者居然都...

  沈念sama閱讀 93,142評(píng)論 3贊 394
• 救了他兩次的神仙讓他今天三更去死

  文/潘曉璐 我一進(jìn)店門滓彰，熙熙樓的掌柜王于貴愁眉苦臉地迎上來控妻，“玉大人，你說我怎么就攤上這事揭绑±虑桑” “怎么了？”我有些...

  開封第一講書人閱讀 164,704評(píng)論 0贊 353
• 道士緝兇錄：失蹤的賣姜人

  文/不壞的土叔 我叫張陵祟绊，是天一觀的道長(zhǎng)址芯。 經(jīng)常有香客問我，道長(zhǎng)诚纸，這世上最難降的妖魔是什么撰筷？ 我笑而不...

  開封第一講書人閱讀 58,702評(píng)論 1贊 294
• ?港島之戀（遺憾婚禮）

  正文 為了忘掉前任，我火速辦了婚禮畦徘，結(jié)果婚禮上毕籽，老公的妹妹穿的比我還像新娘。我一直安慰自己井辆，他們只是感情好关筒，可當(dāng)我...

  茶點(diǎn)故事閱讀 67,716評(píng)論 6贊 392
• 惡毒庶女頂嫁案：這布局不是一般人想出來的

  文/花漫 我一把揭開白布。 她就那樣靜靜地躺著杯缺，像睡著了一般蒸播。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上萍肆，一...

  開封第一講書人閱讀 51,573評(píng)論 1贊 305
• 城市分裂傳說

  那天袍榆，我揣著相機(jī)與錄音，去河邊找鬼塘揣。 笑死包雀，一個(gè)胖子當(dāng)著我的面吹牛，可吹牛的內(nèi)容都是我干的亲铡。 我是一名探鬼主播才写，決...

  沈念sama閱讀 40,314評(píng)論 3贊 418
• 雙鴛鴦連環(huán)套：你想象不到人心有多黑

  文/蒼蘭香墨 我猛地睜開眼葡兑，長(zhǎng)吁一口氣：“原來是場(chǎng)噩夢(mèng)啊……” “哼！你這毒婦竟也來了赞草？” 一聲冷哼從身側(cè)響起讹堤，我...

  開封第一講書人閱讀 39,230評(píng)論 0贊 276
• 萬榮殺人案實(shí)錄

  序言：老撾萬榮一對(duì)情侶失蹤，失蹤者是張志新（化名）和其女友劉穎房资，沒想到半個(gè)月后蜕劝，有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體，經(jīng)...

  沈念sama閱讀 45,680評(píng)論 1贊 314
• ?護(hù)林員之死

  正文 獨(dú)居荒郊野嶺守林人離奇死亡轰异，尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...

  茶點(diǎn)故事閱讀 37,873評(píng)論 3贊 336
• ?白月光啟示錄

  正文 我和宋清朗相戀三年岖沛，在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片搭独。...

  茶點(diǎn)故事閱讀 39,991評(píng)論 1贊 348
• 活死人

  序言：一個(gè)原本活蹦亂跳的男人離奇死亡婴削，死狀恐怖，靈堂內(nèi)的尸體忽然破棺而出牙肝，到底是詐尸還是另有隱情唉俗，我是刑警寧澤，帶...

  沈念sama閱讀 35,706評(píng)論 5贊 346
• ?日本核電站爆炸內(nèi)幕

  正文 年R本政府宣布配椭，位于F島的核電站虫溜，受9級(jí)特大地震影響，放射性物質(zhì)發(fā)生泄漏股缸。R本人自食惡果不足惜衡楞，卻給世界環(huán)境...

  茶點(diǎn)故事閱讀 41,329評(píng)論 3贊 330
• 男人毒藥：我在死后第九天來索命

  文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望敦姻。 院中可真熱鬧瘾境，春花似錦、人聲如沸镰惦。這莊子的主人今日做“春日...

  開封第一講書人閱讀 31,910評(píng)論 0贊 22
• 一樁弒父案，背后竟有這般陰謀

  文/蒼蘭香墨 我抬頭看了看天上的太陽旺入。三九已至兑凿，卻和暖如春，著一層夾襖步出監(jiān)牢的瞬間茵瘾，已是汗流浹背急膀。 一陣腳步聲響...

  開封第一講書人閱讀 33,038評(píng)論 1贊 270
• 情欲美人皮

  我被黑心中介騙來泰國(guó)打工， 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留龄捡，地道東北人。 一個(gè)月前我還...

  沈念sama閱讀 48,158評(píng)論 3贊 370
• 代替公主和親

  正文 我出身青樓慷暂，卻偏偏與公主長(zhǎng)得像聘殖，于是被迫代替她去往敵國(guó)和親晨雳。 傳聞我的和親對(duì)象是個(gè)殘疾皇子，可洞房花燭夜當(dāng)晚...

  茶點(diǎn)故事閱讀 44,941評(píng)論 2贊 355

推薦閱讀更多精彩內(nèi)容

• Linux云服務(wù)器下配置Scrapy并抓取數(shù)據(jù)

  基礎(chǔ)裝備： Linux云服務(wù)器（阿里云Ubuntu 16.04）奸腺；??建立遠(yuǎn)程連接的軟件（這里用的是XShell）...

  ?葉閱讀 5,567評(píng)論 4贊 14
• 爬蟲學(xué)習(xí)路徑及安裝環(huán)境遇到的坑

  學(xué)習(xí)路徑是我自己練手python爬蟲項(xiàng)目時(shí)提煉和精選的餐禁。事先聲明:學(xué)習(xí)好比看醫(yī)生，每個(gè)人目的和問題不一樣突照，再者知識(shí)...

  徐薇薇閱讀 688評(píng)論 0贊 4
• Scrapy安裝向?qū)?/a>

  安裝向?qū)ttps://doc.scrapy.org/en/latest/intro/install.html 安...

  ximengchj閱讀 771評(píng)論 0贊 1
• Python進(jìn)階-第三方庫管理和虛擬環(huán)境

  本文為《爬著學(xué)Python》系列第十三篇文章帮非。 Python能在這幾年火起來，靠的不是網(wǎng)上一大片的爬蟲和服務(wù)器后端...

  SyPy閱讀 4,809評(píng)論 0贊 5
• 薦《當(dāng)我遇見一個(gè)人》

  《當(dāng)我遇見一個(gè)人》這本書是心理學(xué)班上的一個(gè)同學(xué)推薦的讹蘑，當(dāng)我拿上這本書后末盔，我是一口氣讀完了這本書，從沒有一本心理學(xué)方...

  綠兔子000閱讀 926評(píng)論 1贊 2