今天來說一個(gè)實(shí)用的工具:網(wǎng)站克隆坤按。這樣的功能對(duì)于技術(shù)人員來說惊豺,不算什么大的功能,大家可以用N種辦法來實(shí)現(xiàn)骨稿,各有各的奇技淫巧笨鸡。今天主要介紹的是A哥的克隆工具curlMulti。借用這個(gè)功能坦冠,非技術(shù)人員也可以快速的克隆整個(gè)站點(diǎn)形耗。
工具鏈接:
工具特點(diǎn):
- 抓取網(wǎng)站的各項(xiàng)資源html\Css\Js\RAR壓縮文件等
- 并行抓取,抓取速度快的驚人
傻瓜式操作流程
Mac演示辙浑,mac自帶了php激涤,所以整體操作非常簡單
1:下載工具 - v2.3.3
2:準(zhǔn)備工作
修改兩行代碼:
正常情況,改網(wǎng)址就ok判呕。如果需要克隆的站很大很大倦踢,需要在第一行加代碼:
ini_set('memory_limit', '2048M');
3:執(zhí)行克隆
打開終端
在終端執(zhí)行如下操作:
- 右鍵site_clone1.php文件,”顯示簡介“侠草,如圖選中文本辱挥, 復(fù)制(Ctrl+c)
-
在終端輸入: "cd ",然后Ctrl+v粘貼剛才復(fù)制的內(nèi)容边涕,回車 (輸入字符不帶雙引號(hào))
我的終端是這樣的晤碘,可以做為參考:
- 在終端輸入:
php site_clone1.php
到這里,克隆已經(jīng)開始了功蜓。謹(jǐn)記园爷,終端窗口不要關(guān)閉。(如果想讓關(guān)閉窗口后繼續(xù)克隆式撼,請(qǐng)聯(lián)系我)
如果要克隆的網(wǎng)站比較小童社,如小說站,半小時(shí)就可以搞定(每秒克隆100+頁面毫無壓力)
網(wǎng)站存放目錄
雙擊index.html就可以打開已經(jīng)克隆下來的網(wǎng)站著隆。
附:如果想要更快的克隆扰楼,如下操作:
可以自己感受一下改成500的效果,估計(jì)局域網(wǎng)中正在打游戲的同學(xué)就要開罵了美浦,哈哈弦赖!好吧,我估計(jì)不會(huì)有人想測試500并發(fā)的效果抵代,因?yàn)榫钟蚓W(wǎng)真會(huì)卡死腾节。但是呢忘嫉,如果真要測試500并發(fā)荤牍,那需要在終端多執(zhí)行一行命令:
ulimit -n 1000