本節(jié)我們要將我們寫好的腳本同步到服務(wù)器上闸婴,并設(shè)置每天的自動(dòng)更新痕惋。
1. 通過WinScp復(fù)制我們的整個(gè)文件夾到服務(wù)器的跟目錄下
2. 打開putty号俐,復(fù)制根目錄下的文件到usr/local下:?mv BitSpider/ /usr/local/
3. 用whereis crontab 查看corntab在哪里,找到了以后救欧,切換到這個(gè)目錄下, 然后輸入:0 0 9,14,19 * * root cd /root/Various_bit/ArticleSpider/ && python3 entry.py
標(biāo)識9,14,19點(diǎn)執(zhí)行任務(wù)歪今,先切換路徑,然后執(zhí)行
這個(gè)表示每天9點(diǎn)執(zhí)行一次
配置自動(dòng)執(zhí)行
4. 按esc颜矿,:wq保存退出即可
這樣在每天的9點(diǎn),爬蟲將自動(dòng)執(zhí)行一次嫉晶,將當(dāng)天新的文章補(bǔ)充進(jìn)來
5. 在入口python里面骑疆,要用原始路徑的scrapy查詢: os.system('/usr/bin/scrapy crawl bitcoin_eos -s LOG_FILE=spider.log')