1.安裝Visual C++ Build Tools
由于Scrapy的依賴庫文件中鞋真,pywin32和Twisted的底層是基于C語言開發(fā)的头朱,因此需要安裝C語言的編譯環(huán)境勘高。可以直接使用Visual Studio Installer
選擇使用c++的桌面開發(fā)米罚,可以把其它的一些用不上的去掉钧汹。主要是第二個。
2.安裝pywin32
pywin32的安裝方法主要有以下幾種:
2.1 使用exe安裝包來進行安裝
下載地址為:Python for Windows Extensions
根據(jù)電腦Python版本和位數(shù)下載并安裝最新版的pywin32录择,它會自動尋找Python的安裝路徑拔莱,所以不需要做任何修改,一直單擊【下一步】即可隘竭。
在進行安裝時塘秦,不能正確尋找到python的安裝目錄,并將所搜索到的方法均進行嘗試后仍然不能解決动看,遂放棄尊剔,可能是跟我使用的python沒有加入環(huán)境變量吧
2.2使用PIP安裝
python -m pip install pypiwin32
安裝完成后可以測試下有沒有問題
import win32com
3.pip 安裝Scrapy
請確保你的pip版本是最新的
pip install scrapy
寫一個簡單的scrapy語句菱皆,證明爬蟲可以正常運行:
scrapy shell www.baidu.com