一恒輕創(chuàng)筆記

蜘蛛池就是一堆由域名組成的站群耕突，在每個(gè)站點(diǎn)下都生成海量頁(yè)面（抓一堆文本內(nèi)容相互組合）棚点，頁(yè)面模板與正常網(wǎng)頁(yè)沒(méi)多大區(qū)別吞鸭。由于每個(gè)站點(diǎn)都有海量的頁(yè)面帘瞭，所以整個(gè)站群的蜘蛛總抓取量也是...