首先得有一個Scrapy項目毁欣,我在Desktop上新建一個Scrapy的項目叫test艺普,在Desktop目錄打開命令行隧饼,鍵入命令:scrapy startproject test1?
目錄結(jié)構(gòu)如下:?
打開Pycharm欠窒,選擇open?
選擇項目辰斋,ok?
打開如下界面之后代芜,按alt + 1埠褪, 打開project 面板?
在test1/spiders/,文件夾下挤庇,新建一個爬蟲spider.py钞速, 注意代碼中的name="dmoz"。這個名字后面會用到嫡秕。?
在test1目錄和scrapy.cfg同級目錄下面渴语,新建一個begin.py文件,注意箭頭2所指的名字和第5步中的name='dmoz'?名字是一樣的昆咽。
fromscrapyimportcmdline? ? cmdline.execut
1
2
3
7. 上面把文件搞定了遵班,下面要配置一下pycharm了。點擊Run->Edit Configurations
8. 新建一個運行的python模塊?
9. Name:改成spider潮改; script:選擇剛才新建的那個begin.py文件狭郑;Working Direciton:改成自己的工作目錄?
10. 至此,大功告成了汇在,點擊下圖翰萨,右上角的按鈕就能運行了。?
ps:有什么不對的地方 勞煩各位能給指出來糕殉,不勝感激D豆怼V掣妗!
參考:1.?http://scrapy-chs.readthedocs.io/zh_CN/latest/intro/tutorial.html?