#! /usr/bin/python3
# -*- coding: UTF-8 -*-
import urllib
import re
from bs4 import BeautifulSoup
from urllib import request
import requests
import os
#def all_link(): #
link_all=['']
url_all='http://www.mzitu.com/all/'
user_agent = 'Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:59.0) Gecko/201001'
hostheaders={'User-Agent': 'user_agent'}
all_request=urllib.request.Request(url_all, headers=hostheaders)
response=urllib.request.urlopen(all_request)
all_soup=BeautifulSoup(response, "html.parser")
for a in all_soup.find("div", class_="all").find_all("a")[1:]:
title=a.get_text()
#create floder
path = str(title).strip()
#path = '123'
os.makedirs(os.path.join("/home/levy/meizitu", path))
os.chdir("/home/levy/meizitu/"+path)
#get theme link
href=a['href']
html=requests.get(href,headers=hostheaders)
html_soup=BeautifulSoup(html.text,"html.parser")
html_page_num=html_soup.find("div",class_="pagenavi").find_all("span")[-2].get_text()
for i in range(1,int(html_page_num)+1):
img_page_url=href+"/"+str(i)
picreferer=img_page_url
#此處加入referer消息反盜鏈绸狐，親測可用。
picheaders={'User-Agent': 'user_agent','Referer':picreferer}
img_page_content=requests.get(img_page_url)
img_page_soup=BeautifulSoup(img_page_content.text,"html.parser")
img_src_url=img_page_soup.find("div",class_="main-image").find("img")["src"]
#save_img
name=img_src_url[-9:-4]
img=requests.get(img_src_url,headers=picheaders)
f= open(name+'.jpg', 'ab')
f.write(img.content)
f.close()
python 抓取妹子圖 反盜鏈
最后編輯于 ：
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
- 文/潘曉璐 我一進(jìn)店門昔期，熙熙樓的掌柜王于貴愁眉苦臉地迎上來已卸，“玉大人，你說我怎么就攤上這事硼一±墼瑁” “怎么了？”我有些...
- 文/不壞的土叔 我叫張陵般贼，是天一觀的道長愧哟。 經(jīng)常有香客問我，道長哼蛆，這世上最難降的妖魔是什么蕊梧？ 我笑而不...
- 正文 為了忘掉前任，我火速辦了婚禮腮介，結(jié)果婚禮上肥矢，老公的妹妹穿的比我還像新娘。我一直安慰自己叠洗，他們只是感情好甘改，可當(dāng)我...
- 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著灭抑，像睡著了一般十艾。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上腾节，一...
- 文/蒼蘭香墨 我猛地睜開眼，長吁一口氣：“原來是場噩夢啊……” “哼鞋既！你這毒婦竟也來了力九？” 一聲冷哼從身側(cè)響起耍铜，我...
- 序言：老撾萬榮一對情侶失蹤，失蹤者是張志新（化名）和其女友劉穎跌前，沒想到半個月后棕兼，有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體，經(jīng)...
- 正文 獨(dú)居荒郊野嶺守林人離奇死亡抵乓，尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
- 正文 我和宋清朗相戀三年伴挚，在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片灾炭。...
- 正文 年R本政府宣布铡原，位于F島的核電站偷厦，受9級特大地震影響，放射性物質(zhì)發(fā)生泄漏燕刻。R本人自食惡果不足惜只泼，卻給世界環(huán)境...
- 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望酌儒。 院中可真熱鬧辜妓，春花似錦、人聲如沸忌怎。這莊子的主人今日做“春日...
- 文/蒼蘭香墨 我抬頭看了看天上的太陽榴啸。三九已至，卻和暖如春晚岭，著一層夾襖步出監(jiān)牢的瞬間鸥印，已是汗流浹背。 一陣腳步聲響...
- 正文 我出身青樓片择，卻偏偏與公主長得像潜的，于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子字管，可洞房花燭夜當(dāng)晚...
推薦閱讀更多精彩內(nèi)容
- 環(huán)境：windows7 + python2.7相關(guān)庫：lxml + json + urllib爬取的網(wǎng)站地址：ht...
- 前言 有一段沒用 python 了，我也不知道自己為什么對 python 越來越淡亡呵，可能自己還是比較喜歡 andr...
- 今天晚上順帶就實(shí)際的寫寫工具锰什，我們剛學(xué)完P(guān)ython的基礎(chǔ)語法下硕！抓點(diǎn)妹子帶回家~ 總結(jié)一下之前的吧，我寫了關(guān)于...
- 還有兩月，又是一年畢業(yè)季沦泌，又是一場曲終人散糊昙。時間似流水，催促我們長大谢谦，四年一部青春劇释牺，到了結(jié)尾，我們都是主...
