由于scrapy足夠直觀和友好悼潭，所以嘗試用它寫一個(gè)簡(jiǎn)單的exhentai下載器 - - 。
一醉旦、前言
- 需要準(zhǔn)備e-hentai賬號(hào)
- 每天下載有配額
二晋修、使用
- 安裝python2.7增炭、pyOpenSSL、Twisted搬俊、setuptools紊扬、Zope.Interface、libxml2唉擂、w3lib餐屎、scrapy
- 修改setting.py FILES_STORE中填寫保存路徑
- 執(zhí)行python main.py
按照提示輸入
然后。玩祟。額腹缩。。空扎。
三藏鹊、源碼
整體是這樣的結(jié)構(gòu)，入口是main.py
結(jié)構(gòu)
在spider中登錄的需要兩次转锈，第一次的cookie不完整
spider
pipeline中重寫了file_path以確保獲得正確的文件名
pipeline
其他沒有什么特別的
To be continued
