-
創(chuàng)建項(xiàng)目
scrapy startproject myproject [project_dir] -
生成爬蟲任務(wù)
scrapy genspider mydomain mydomain.com -
查看可以生成的模板
scrapy genspider -l -
執(zhí)行爬蟲任務(wù)
scrapy crawl <spider> -
檢查代碼是否出錯(cuò)
scrapy check [-l] <spider> -
查看項(xiàng)目中所有爬蟲任務(wù)
scrapy list -
快速抓取網(wǎng)頁源代碼
scrapy fetch [--nolog] [--headers] <url> -
保存網(wǎng)頁源代碼為一個(gè)文件岳掐，并在瀏覽器中打開該文件（靜態(tài)文件）
scrapy view <url> -
交互模式
scrapy shell <url> -
獲取項(xiàng)目配置情況
scrapy settings [options] -
通過文件名稱運(yùn)行爬蟲
scrapy runspider <spider_file.py>
scrapy命令行
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
- 文/潘曉璐 我一進(jìn)店門毁习，熙熙樓的掌柜王于貴愁眉苦臉地迎上來，“玉大人卖丸，你說我怎么就攤上這事纺且。” “怎么了稍浆？”我有些...
- 文/不壞的土叔 我叫張陵载碌，是天一觀的道長。 經(jīng)常有香客問我衅枫，道長嫁艇，這世上最難降的妖魔是什么？ 我笑而不...
- 正文 為了忘掉前任弦撩，我火速辦了婚禮步咪，結(jié)果婚禮上，老公的妹妹穿的比我還像新娘益楼。我一直安慰自己猾漫，他們只是感情好，可當(dāng)我...
- 文/花漫 我一把揭開白布偏形。 她就那樣靜靜地躺著静袖，像睡著了一般。 火紅的嫁衣襯著肌膚如雪俊扭。 梳的紋絲不亂的頭發(fā)上，一...
- 文/蒼蘭香墨 我猛地睜開眼姐仅，長吁一口氣：“原來是場噩夢啊……” “哼！你這毒婦竟也來了刻盐？” 一聲冷哼從身側(cè)響起掏膏，我...
- 序言：老撾萬榮一對情侶失蹤，失蹤者是張志新（化名）和其女友劉穎敦锌，沒想到半個(gè)月后馒疹，有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體，經(jīng)...
- 正文 獨(dú)居荒郊野嶺守林人離奇死亡乙墙，尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
- 正文 我和宋清朗相戀三年颖变，在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了生均。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
- 正文 年R本政府宣布，位于F島的核電站朽色，受9級特大地震影響邻吞，放射性物質(zhì)發(fā)生泄漏征绸。R本人自食惡果不足惜拯杠，卻給世界環(huán)境...
- 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望添诉。 院中可真熱鬧梢褐，春花似錦旺遮、人聲如沸。這莊子的主人今日做“春日...
- 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至鱼响，卻和暖如春鸣剪，著一層夾襖步出監(jiān)牢的瞬間，已是汗流浹背丈积。 一陣腳步聲響...
- 正文 我出身青樓铛纬，卻偏偏與公主長得像，于是被迫代替她去往敵國和親唬滑。 傳聞我的和親對象是個(gè)殘疾皇子告唆，可洞房花燭夜當(dāng)晚...
推薦閱讀更多精彩內(nèi)容
- Python版本管理：pyenv和pyenv-virtualenvScrapy爬蟲入門教程一 安裝和基本使用Scr...
- 1：創(chuàng)建scrapy項(xiàng)目 scrapy startproject XXXXXX 2：進(jìn)入項(xiàng)目目錄 cd XXXX ...
- scrapy.cfg存放的目錄認(rèn)定是 項(xiàng)目的根目錄 scrapy 針對不同目的提供了多個(gè)命令。 創(chuàng)建項(xiàng)目 有些Sc...
- 序言第1章 Scrapy介紹第2章 理解HTML和XPath第3章 爬蟲基礎(chǔ)第4章 從Scrapy到移動應(yīng)用第5章...
