我的編程之旅(python爬蟲)

在這里感謝@靜覓

也學(xué)了一段時間python了,不搞一搞爬蟲有點說不過去了万伤。

然后今天就搞了兩個小爬蟲:(就只是涉及簡單的requests庫的使用和簡單的正則,但那個withopen是copy的呜袁。)


import requests,re#https://movie.douban.com/top250?start=75&filter=for j in range(10): t=str(25*j) url="https://movie.douban.com/top250?start="+t+"&filter=" r=requests.get(url) name=re.findall('(.*?)',r.text)


? ? inq=re.findall('.*?inq.*?>(.*?)',r.text)


? ? for i in range(25):



? ? ? ? #def write_to_json(content):


? ? ? ? ? ? #with open('result.txt', 'a') as f:


? ? ? ? ? ? ? ? #print(type(json.dumps(content)))


? ? ? ? ? ? ? ? #f.write(json.dumps(content, ensure_ascii=False,).encode('utf-8'))


? ? ? ? print(name[i],'\t',point[i],'\t',inq[i])


import requests,rej=0d=['科技','動物','建筑','風(fēng)景','花海','旅游','黑白','自然','大海','高山','折頁']for t in d: url="http://meisu.huaban.com/searchi.php?keyword="+t r=requests.get(url)#r=requests.get("http://meisu.huaban.com/searchi.php?keyword=插畫") img=re.findall('.*?data-original.*?(http.*?=thumbs).*?',r.text) name=re.findall('',r.text)


? ? for i in img:


? ? ? ? j=j+1


? ? #for j in range(1000):


? ? ? ? im=requests.get(i)


? ? #for j in name:


? ? ? ? load='imge1/img'+str(j)+'.jpg'


? ? ? ? with open(load,'wb') as f:


? ? ? ? ? ? f.write(im.content)




最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末敌买,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子阶界,更是在濱河造成了極大的恐慌虹钮,老刑警劉巖,帶你破解...
    沈念sama閱讀 219,270評論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件膘融,死亡現(xiàn)場離奇詭異芙粱,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī)氧映,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,489評論 3 395
  • 文/潘曉璐 我一進(jìn)店門春畔,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事律姨≌窬” “怎么了?”我有些...
    開封第一講書人閱讀 165,630評論 0 356
  • 文/不壞的土叔 我叫張陵择份,是天一觀的道長铺韧。 經(jīng)常有香客問我,道長缓淹,這世上最難降的妖魔是什么哈打? 我笑而不...
    開封第一講書人閱讀 58,906評論 1 295
  • 正文 為了忘掉前任,我火速辦了婚禮讯壶,結(jié)果婚禮上料仗,老公的妹妹穿的比我還像新娘。我一直安慰自己伏蚊,他們只是感情好立轧,可當(dāng)我...
    茶點故事閱讀 67,928評論 6 392
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著躏吊,像睡著了一般氛改。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上比伏,一...
    開封第一講書人閱讀 51,718評論 1 305
  • 那天胜卤,我揣著相機(jī)與錄音,去河邊找鬼赁项。 笑死葛躏,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的悠菜。 我是一名探鬼主播舰攒,決...
    沈念sama閱讀 40,442評論 3 420
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼悔醋!你這毒婦竟也來了摩窃?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 39,345評論 0 276
  • 序言:老撾萬榮一對情侶失蹤芬骄,失蹤者是張志新(化名)和其女友劉穎猾愿,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體德玫,經(jīng)...
    沈念sama閱讀 45,802評論 1 317
  • 正文 獨居荒郊野嶺守林人離奇死亡匪蟀,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,984評論 3 337
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了宰僧。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 40,117評論 1 351
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖琴儿,靈堂內(nèi)的尸體忽然破棺而出段化,到底是詐尸還是另有隱情,我是刑警寧澤造成,帶...
    沈念sama閱讀 35,810評論 5 346
  • 正文 年R本政府宣布显熏,位于F島的核電站,受9級特大地震影響晒屎,放射性物質(zhì)發(fā)生泄漏喘蟆。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 41,462評論 3 331
  • 文/蒙蒙 一鼓鲁、第九天 我趴在偏房一處隱蔽的房頂上張望蕴轨。 院中可真熱鬧,春花似錦骇吭、人聲如沸橙弱。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,011評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽棘脐。三九已至,卻和暖如春龙致,著一層夾襖步出監(jiān)牢的瞬間蛀缝,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 33,139評論 1 272
  • 我被黑心中介騙來泰國打工目代, 沒想到剛下飛機(jī)就差點兒被人妖公主榨干…… 1. 我叫王不留内斯,地道東北人。 一個月前我還...
    沈念sama閱讀 48,377評論 3 373
  • 正文 我出身青樓像啼,卻偏偏與公主長得像俘闯,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子忽冻,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 45,060評論 2 355

推薦閱讀更多精彩內(nèi)容