Spiders(爬蟲(chóng)):它負(fù)責(zé)處理所有Responses,從中分析提取數(shù)據(jù)潭千，獲取Item字段需要的數(shù)據(jù)，并將需要跟進(jìn)的URL提交給引擎借尿，再次進(jìn)入Scheduler(調(diào)度器)Engine(引擎)：負(fù)責(zé)Spider刨晴、ItemPipeline、Downloader路翻、Scheduler中間的通訊狈癞，信號(hào)、數(shù)據(jù)傳遞等茂契。Scheduler(調(diào)度器)：它負(fù)責(zé)接受引擎發(fā)送過(guò)來(lái)的Request請(qǐng)求蝶桶，并按照一定的方式進(jìn)行整理排列，入隊(duì)掉冶，當(dāng)引擎需要時(shí)真竖，交還給引擎。Downloader(下載器)：負(fù)責(zé)下載Scrapy Engine(引擎)發(fā)送的所有Requests請(qǐng)求厌小，并將其獲取到的Responses交還給Scrapy Engine(引擎)恢共，由引擎交給Spider來(lái)處理ItemPipeline(管道):它負(fù)責(zé)處理Spider中獲取到的Item，并進(jìn)行進(jìn)行后期處理（詳細(xì)分析璧亚、過(guò)濾撑柔、存儲(chǔ)等）的地方.Downloader Middlewares（下載中間件）：你可以當(dāng)作是一個(gè)可以自定義擴(kuò)展下載功能的組件框喳。Spider Middlewares（Spider中間件）：你可以理解為是一個(gè)可以自定擴(kuò)展和操作引擎和Spider中間通信的功能組件（比如進(jìn)入Spider的Responses;和從Spider出去的Requests）
