【百度云搜索,搜各種資料:http://bdy.lqkweb.com】
【搜網(wǎng)盤馋记,搜各種資料:http://www.swpan.cn】
當(dāng)前環(huán)境python3.5 号坡,windows10系統(tǒng)
Linux系統(tǒng)安裝
在線安裝,會自動安裝scrapy模塊以及相關(guān)依賴模塊
pip install Scrapy
手動源碼安裝梯醒,比較麻煩要自己手動安裝scrapy模塊以及依賴模塊
安裝以下模塊
1宽堆、lxml-3.8.0.tar.gz (XML處理庫)
2、Twisted-17.5.0.tar.bz2 (用Python編寫的異步網(wǎng)絡(luò)框架)
3茸习、Scrapy-1.4.0.tar.gz (高級web爬行和web抓取框架)
4畜隶、pyOpenSSL-17.2.0.tar.gz (OpenSSL庫)
5、queuelib-1.4.2.tar.gz (Queuelib是用于Python的持久(基于磁盤的)隊列的集合)
6号胚、w3lib-1.17.0.tar.gz (與web相關(guān)的函數(shù)的Python庫)
7籽慢、cryptography-2.0.tar.gz (密碼學(xué)是一種包)
8、pyasn1-0.2.3.tar.gz (ASN類型和編解碼器)
9猫胁、pyasn1-modules-0.0.9.tar.gz (ASN的集合箱亿。基于協(xié)議模塊)
10弃秆、cffi-1.10.0.tar.gz (用于Python調(diào)用C代碼的外部函數(shù)接口)
11届惋、asn1crypto-0.22.0.tar.gz (快速的ASN一個解析器和序列化器)
12髓帽、idna-2.5.tar.gz (應(yīng)用程序中的國際化域名(IDNA))
13、pycparser-2.18.tar.gz (C解析器在Python中)
windows系統(tǒng)安裝
windows安裝脑豹,首先要安裝pywin32郑藏,根據(jù)自己的系統(tǒng)來安裝32位還是64位
pywin32-221.win32-py3.5.exe
pywin32-221.win-amd64-py3.5.exe
在線安裝
pip install scrapy
手動源碼安裝,比較麻煩要自己手動安裝scrapy模塊以及依賴模塊
安裝以下模塊
1瘩欺、lxml-3.8.0.tar.gz (XML處理庫)
2必盖、Twisted-17.5.0.tar.bz2 (用Python編寫的異步網(wǎng)絡(luò)框架)
3、Scrapy-1.4.0.tar.gz (高級web爬行和web抓取框架)
4击碗、pyOpenSSL-17.2.0.tar.gz (OpenSSL庫)
5筑悴、queuelib-1.4.2.tar.gz (Queuelib是用于Python的持久(基于磁盤的)隊列的集合)
6、w3lib-1.17.0.tar.gz (與web相關(guān)的函數(shù)的Python庫)
7稍途、cryptography-2.0.tar.gz (密碼學(xué)是一種包)
8、pyasn1-0.2.3.tar.gz (ASN類型和編解碼器)
9砚婆、pyasn1-modules-0.0.9.tar.gz (ASN的集合械拍。基于協(xié)議模塊)
10装盯、cffi-1.10.0.tar.gz (用于Python調(diào)用C代碼的外部函數(shù)接口)
11坷虑、asn1crypto-0.22.0.tar.gz (快速的ASN一個解析器和序列化器)
12、idna-2.5.tar.gz (應(yīng)用程序中的國際化域名(IDNA))
13埂奈、pycparser-2.18.tar.gz (C解析器在Python中)
測試是否安裝成功
在cmd終端迄损,運(yùn)行python
然后運(yùn)行:import scrapy ,沒有提示錯誤說明安裝成功