Just Downlink
實(shí)戰(zhàn):基于 scrapy + elasticsearch + django 搭建的分布式電影搜索
源碼:https://github.com/GFigure/JustDownlink
網(wǎng)頁鏈接:Just Downlink
- 利用 scrapy 爬取知名電影網(wǎng)站的下載鏈接
- 利用 elasticsearch 存儲(chǔ)數(shù)據(jù)
- 利用 django 搭建電影搜索界面
數(shù)據(jù)采集
- 支持同步瑰煎、異步數(shù)據(jù)存儲(chǔ)至 Mysql 數(shù)據(jù)庫
- 支持 elasticsearch 數(shù)據(jù)存儲(chǔ)
- 支持 json 數(shù)據(jù)導(dǎo)出
- 保存日志至 logs 目錄
搜索界面
- 搜索建議
- 簡化電影下載頁面