提到爬蟲(chóng)唯鸭，對(duì)于行內(nèi)人士來(lái)講感情是復(fù)雜的须蜗。人人都在用，人人都在防目溉。又有很多人給爬蟲(chóng)分類明肮，初級(jí)的、中級(jí)的缭付、高級(jí)的柿估、善意的、惡意的陷猫。對(duì)待爬蟲(chóng)的態(tài)度也是迥異的秫舌，有人專門(mén)撰寫(xiě)文章批評(píng)、有人舉例回?fù)粜迕剩蠖鄶?shù)人都在默默按自己的想法行動(dòng)（爬或防）足陨。
不得不承認(rèn)，我也是一個(gè)爬蟲(chóng)作者娇未。因?yàn)榭炊嗔四担?tīng)多了，也想表達(dá)一下自己對(duì)爬蟲(chóng)的看法零抬。我的態(tài)度是“請(qǐng)對(duì)爬蟲(chóng)多一些寬容镊讼，加一點(diǎn)約束”。
“詬病爬蟲(chóng)”的原因
個(gè)人見(jiàn)解：不喜歡或詬病爬蟲(chóng)的人媚值，主要是被爬蟲(chóng)騷擾過(guò)或正在被騷擾的人或公司狠毯。爬蟲(chóng)只是一個(gè)技術(shù)工具，無(wú)關(guān)好壞褥芒。你詬病是使用爬蟲(chóng)的人嚼松。就像一把刀，有人用來(lái)切菜锰扶，有人用來(lái)殺人一個(gè)道理献酗。
寬容
互聯(lián)網(wǎng)本身就是因?yàn)閷捜莺凸蚕矶嬖凇Ｒ驗(yàn)閷捜菘琅＃删土薌oogle和百度罕偎，如果每個(gè)網(wǎng)站都禁止爬蟲(chóng)，你能想像互聯(lián)網(wǎng)是什么樣子嗎京闰？從另一個(gè)角度看颜及，有爬蟲(chóng)光顧甩苛，說(shuō)明你的網(wǎng)站還有價(jià)值，難道不是嗎俏站？就像矛和盾永遠(yuǎn)是對(duì)立的嗎讯蒲？他們是互相依賴的。正是因?yàn)橛辛伺老x(chóng)肄扎，才產(chǎn)生了防爬技術(shù)墨林，防爬技術(shù)也讓爬蟲(chóng)技術(shù)飛速發(fā)展。同時(shí)犯祠，也不是防就是不寬容旭等，防只是防新蟲(chóng)或害蟲(chóng)。我們對(duì)爬蟲(chóng)寬容衡载，也要對(duì)網(wǎng)站寬容搔耕。
約束
寬容不是放縱，更不是無(wú)底線痰娱。我的觀點(diǎn)是“約束爬蟲(chóng)度迂、引導(dǎo)新蟲(chóng)、防治害蟲(chóng)”猜揪。約束既要公共約束，更要自律約束坛梁。特別是對(duì)于新蟲(chóng)而姐，通過(guò)自律約束，不要發(fā)展成害蟲(chóng)划咐。自律約束包括爬取速度設(shè)置要合理拴念，爬取時(shí)間要合理，以不影響網(wǎng)站正確運(yùn)營(yíng)為底線褐缠。我相信政鼠，做大事的人，永遠(yuǎn)都會(huì)保留底線队魏，遵守底線原則公般。通過(guò)長(zhǎng)期的自律約束，我們自然就有了公共約束胡桨。約束爬蟲(chóng)官帘，請(qǐng)從每一條蟲(chóng)子開(kāi)始吧，我希望你盡快加入到爬蟲(chóng)約束隊(duì)伍昧谊。
