先來爬爬POI_再續(xù)

原文再續(xù),書接上回

前幾天一直在忙工作的事情孩革,沒有來填坑,給大家數(shù)據(jù)抱歉惶翻。

上一篇講了一下怎么把文件保存下來姑蓝,倒是挖了個異常處理的坑還沒解決,這次就把這個坑給填上吧吕粗。

異常呢纺荧,在這個小爬蟲里邊主要有兩種情況,一種是在向服務(wù)器發(fā)送請求的時候超時了颅筋,還有一種是返回回來的數(shù)據(jù)不對勁虐秋。至于其他的存數(shù)據(jù)的盤被拔了、突然斷電電腦關(guān)機(jī)啦垃沦,不在考慮之列。

首先說第一種情況用押,大部分時候是因?yàn)榫W(wǎng)絡(luò)狀態(tài)不好肢簿,一般會是這樣的time out


異常示例

對于這種異常,我一般是試用try....AAAA...except....BBBB...語句來控制,這個語句的意思池充,按照我個人的理解就是嘗試AAAA桩引,如果AAAA執(zhí)行過程中出問題了,就去執(zhí)行BBBB收夸。具體含義我還是貼個鏈接吧坑匠。


try以后的代碼

運(yùn)行結(jié)果大概是這樣的


把出現(xiàn)問題的url打印出來

好了,網(wǎng)絡(luò)異常的問題解決的了卧惜,下邊就來看返回?cái)?shù)據(jù)異常的問題了厘灼。

返回值異常問題一般會出現(xiàn)在你的key訪問權(quán)限用完了,或者你填寫的參數(shù)有問題之類的咽瓷,這時候设凹,就需要對返回的數(shù)據(jù)做一下判斷了。具體的錯誤代碼茅姜,點(diǎn)這里返回狀態(tài)代碼鏈接闪朱。


這是我隨便造了一個key以后的狀態(tài)

對于這個問題,用try....except.....和if......else.......都可以解決钻洒,不過我一般喜歡用if解決奋姿。


加個if 。素标。称诗。else。糯钙。粪狼。語句

好了,到此為止任岸,一個簡單的爬蟲就搞定了再榄,你申請個KEY就可以跑起來了,不過還是有一定的問題享潜,比如異常的區(qū)塊的數(shù)據(jù)怎么處理困鸥,這個搞起來有點(diǎn)麻煩,等我啥時候閑下來有時間再搞吧剑按。

老規(guī)矩:有需要這部分代碼的同志可以給我發(fā)郵件疾就,大概介紹一下自己,然后說明要這部分代碼就好了艺蝴,當(dāng)然了猬腰,開發(fā)者的KEY我可是不會給的,自己去申請吧猜敢。郵箱1373415867@qq.com

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末姑荷,一起剝皮案震驚了整個濱河市盒延,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌鼠冕,老刑警劉巖添寺,帶你破解...
    沈念sama閱讀 221,548評論 6 515
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異懈费,居然都是意外死亡计露,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,497評論 3 399
  • 文/潘曉璐 我一進(jìn)店門憎乙,熙熙樓的掌柜王于貴愁眉苦臉地迎上來票罐,“玉大人,你說我怎么就攤上這事寨闹〗鹤梗” “怎么了?”我有些...
    開封第一講書人閱讀 167,990評論 0 360
  • 文/不壞的土叔 我叫張陵繁堡,是天一觀的道長沈善。 經(jīng)常有香客問我,道長椭蹄,這世上最難降的妖魔是什么闻牡? 我笑而不...
    開封第一講書人閱讀 59,618評論 1 296
  • 正文 為了忘掉前任,我火速辦了婚禮绳矩,結(jié)果婚禮上罩润,老公的妹妹穿的比我還像新娘。我一直安慰自己翼馆,他們只是感情好割以,可當(dāng)我...
    茶點(diǎn)故事閱讀 68,618評論 6 397
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著应媚,像睡著了一般严沥。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上中姜,一...
    開封第一講書人閱讀 52,246評論 1 308
  • 那天消玄,我揣著相機(jī)與錄音,去河邊找鬼丢胚。 笑死翩瓜,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的携龟。 我是一名探鬼主播兔跌,決...
    沈念sama閱讀 40,819評論 3 421
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼峡蟋!你這毒婦竟也來了浮定?” 一聲冷哼從身側(cè)響起相满,我...
    開封第一講書人閱讀 39,725評論 0 276
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎桦卒,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體匿又,經(jīng)...
    沈念sama閱讀 46,268評論 1 320
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡方灾,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 38,356評論 3 340
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了碌更。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片裕偿。...
    茶點(diǎn)故事閱讀 40,488評論 1 352
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖痛单,靈堂內(nèi)的尸體忽然破棺而出嘿棘,到底是詐尸還是另有隱情,我是刑警寧澤旭绒,帶...
    沈念sama閱讀 36,181評論 5 350
  • 正文 年R本政府宣布鸟妙,位于F島的核電站,受9級特大地震影響挥吵,放射性物質(zhì)發(fā)生泄漏重父。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,862評論 3 333
  • 文/蒙蒙 一忽匈、第九天 我趴在偏房一處隱蔽的房頂上張望房午。 院中可真熱鬧,春花似錦丹允、人聲如沸郭厌。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,331評論 0 24
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽折柠。三九已至,卻和暖如春萎羔,著一層夾襖步出監(jiān)牢的瞬間液走,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 33,445評論 1 272
  • 我被黑心中介騙來泰國打工贾陷, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留缘眶,地道東北人。 一個月前我還...
    沈念sama閱讀 48,897評論 3 376
  • 正文 我出身青樓髓废,卻偏偏與公主長得像巷懈,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子慌洪,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,500評論 2 359

推薦閱讀更多精彩內(nèi)容