如何安裝和創(chuàng)建項(xiàng)目這個不說了哟玷。直接上代碼
QQ截圖20160728231951.png
在spiders目錄下創(chuàng)建crawl.py
import scrapy
from bs4 import BeautifulSoup
class AppleCrawler(scrapy.Spider):
name = "apple"
start_urls = ['http://www.appledaily.com.tw/realtimenews/section/new']
def parse(self,response):
res = BeautifulSoup(response.body)
for news in res.select('.rtddt'):
print news.select('h1')[0].text
```
然后打開CDM 直接運(yùn)行吧
`scrapy crawl apple`
都是現(xiàn)學(xué)現(xiàn)做的，其實(shí)我現(xiàn)在還不會用scrapy爬圖片還有保存掀亩。這兩天再找個能用的教程學(xué)下爬圖片贰镣。簡書上有兩個scrapy爬圖片的教程网严，可是我復(fù)制代碼好像用不了贩绕。昨天其實(shí)有想學(xué)使用Git西饵，可是上傳不了酝掩，過段時間再學(xué)好了。
