scrapy版本 前前后后幾個(gè)星期囱挑,錯(cuò)了改,改了錯(cuò),錯(cuò)了再改旨枯!錯(cuò)了不要緊,錯(cuò)了才能誕生更好的版本混驰。 mooc_spider.py items.p...
生產(chǎn)者消費(fèi)者(多線程)版本 這個(gè)版本速度嗖嗖的、婴栽、满粗、、爬點(diǎn)下來(lái)學(xué)習(xí)學(xué)習(xí)呀S拚S辰浴! 存在的問題:爬取效率還可以轰枝,但是程序還是經(jīng)惩背梗卡起不運(yùn)行,也不報(bào)錯(cuò)...
項(xiàng)目初衷 學(xué)習(xí)了一段時(shí)間的“學(xué)習(xí)強(qiáng)國(guó)”的慕課視頻缭裆,覺得還不錯(cuò)键闺,但是只能在線看還不能快進(jìn),所以就萌生了下點(diǎn)視頻下來(lái)來(lái)學(xué)習(xí)的想法幼驶。最開始我一個(gè)一個(gè)改...
上源代碼: 運(yùn)行結(jié)果: 遇到的問題:隨機(jī)生成的數(shù)字有重復(fù)的 有大神看到這篇文章愿意的話可以指導(dǎo)哈小弟艾杏,謝謝了!V言濉9荷!!
上源代碼: 運(yùn)行結(jié)果: 第一次運(yùn)行爬取了40首歌氏淑,第一個(gè)for循環(huán) for i in range(0,2)把前兩頁(yè)共40首歌全部爬取下來(lái)了勃蜘。 第...
學(xué)習(xí)背景:改變自己,讓自己成為一個(gè)有價(jià)值的人假残,想了好久選了很多路缭贡,最終選擇了數(shù)據(jù)分析這條路,走python路線辉懒。接觸學(xué)習(xí)一個(gè)新的事物還是有一定的...