人肉python腳本爬蟲

? ? ? ? ?看了幾天的python,發(fā)現(xiàn)python的語法確實(shí)簡單负拟。今天了解了一下python寫爬蟲烦衣,在這里記錄一下。

首先 我們要下載pycharm?

http://www.jetbrains.com/

然后新建工程


第一種辦法

目錄如上 rexx.py 是使用正則表達(dá)式的方法? meizi.py是使用BeautifulSoup 三方庫來實(shí)現(xiàn)解析jpg圖片鏈接(早就聽說python的第三庫多且牛)

正則表達(dá)式我在這就不多描述代碼如下

首先里面用到了requests 這個庫 掩浙。同理我們用時pip install requests安裝

source.txt 是我們把網(wǎng)頁源碼復(fù)制到txt里面解析的(人肉就是 手動操作哈哈花吟!后面會介紹不用自己復(fù)制粘貼源碼的操作)

解析完txt文件 使用正則表達(dá)式匹配出我們的圖片 最終把他寫入文件就可以了

第二種辦法

在meizi.py文件里面 代碼如下


這里用到了自帶的類庫 urllib2 以及BeautifulSoup?

當(dāng)然我們可以把代碼復(fù)制到txt解析然后處理 但是現(xiàn)在我們現(xiàn)在直接urlopen一個鏈接

然后使用BeautifulSoup 處理拿到soup

使用soup.findall 就可以解析到想到的數(shù)據(jù)

BeautifulSoup 的功能比較多大家可以自己百度一下 ?


這是我隨便爬的圖片 好玩弄的 ?我這只是做個備注 可能有點(diǎn)亂 有時間會整理下思路,大家隨便看看就好厨姚。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末衅澈,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子谬墙,更是在濱河造成了極大的恐慌今布,老刑警劉巖,帶你破解...
    沈念sama閱讀 222,183評論 6 516
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件拭抬,死亡現(xiàn)場離奇詭異部默,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī)玖喘,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,850評論 3 399
  • 文/潘曉璐 我一進(jìn)店門甩牺,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人累奈,你說我怎么就攤上這事贬派。” “怎么了澎媒?”我有些...
    開封第一講書人閱讀 168,766評論 0 361
  • 文/不壞的土叔 我叫張陵搞乏,是天一觀的道長。 經(jīng)常有香客問我戒努,道長请敦,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 59,854評論 1 299
  • 正文 為了忘掉前任储玫,我火速辦了婚禮侍筛,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘撒穷。我一直安慰自己搂捧,他們只是感情好盗尸,可當(dāng)我...
    茶點(diǎn)故事閱讀 68,871評論 6 398
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著境肾,像睡著了一般百姓。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 52,457評論 1 311
  • 那天,我揣著相機(jī)與錄音僚稿,去河邊找鬼。 笑死蟀伸,一個胖子當(dāng)著我的面吹牛蚀同,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播啊掏,決...
    沈念sama閱讀 40,999評論 3 422
  • 文/蒼蘭香墨 我猛地睜開眼唤崭,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了脖律?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 39,914評論 0 277
  • 序言:老撾萬榮一對情侶失蹤腕侄,失蹤者是張志新(化名)和其女友劉穎小泉,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體冕杠,經(jīng)...
    沈念sama閱讀 46,465評論 1 319
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡微姊,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 38,543評論 3 342
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了分预。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片兢交。...
    茶點(diǎn)故事閱讀 40,675評論 1 353
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖笼痹,靈堂內(nèi)的尸體忽然破棺而出配喳,到底是詐尸還是另有隱情,我是刑警寧澤凳干,帶...
    沈念sama閱讀 36,354評論 5 351
  • 正文 年R本政府宣布晴裹,位于F島的核電站,受9級特大地震影響救赐,放射性物質(zhì)發(fā)生泄漏涧团。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 42,029評論 3 335
  • 文/蒙蒙 一经磅、第九天 我趴在偏房一處隱蔽的房頂上張望泌绣。 院中可真熱鬧,春花似錦预厌、人聲如沸阿迈。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,514評論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽仿滔。三九已至惠毁,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間崎页,已是汗流浹背鞠绰。 一陣腳步聲響...
    開封第一講書人閱讀 33,616評論 1 274
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留飒焦,地道東北人蜈膨。 一個月前我還...
    沈念sama閱讀 49,091評論 3 378
  • 正文 我出身青樓,卻偏偏與公主長得像牺荠,于是被迫代替她去往敵國和親翁巍。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,685評論 2 360

推薦閱讀更多精彩內(nèi)容

  • 聲明:本文講解的實(shí)戰(zhàn)內(nèi)容休雌,均僅用于學(xué)習(xí)交流灶壶,請勿用于任何商業(yè)用途! 一杈曲、前言 強(qiáng)烈建議:請在電腦的陪同下驰凛,閱讀本文...
    Bruce_Szh閱讀 12,725評論 6 28
  • 關(guān)于bs4,官方文檔的介紹已經(jīng)非常詳細(xì)了,傳送:Beautifulsoup 4官方文檔,這里我把它組織成自己已經(jīng)消...
    徐薇薇閱讀 5,415評論 0 1
  • 環(huán)境管理管理Python版本和環(huán)境的工具担扑。p–非常簡單的交互式python版本管理工具恰响。pyenv–簡單的Pyth...
    MrHamster閱讀 3,798評論 1 61
  • 小狗帕貝是個清潔工胚宦,每天上午十點(diǎn)它就嗡嗡嗡地唱著歌打掃房間了。他很勤快燕垃,從客廳掃到臥室再到陽臺枢劝,連角落里面的一根頭...
    alas閱讀 660評論 0 1
  • 昨天閑來無事,在手機(jī)視頻軟件里搜了部關(guān)于青春的電影利术,晚上躺在床上腦子里就一直在浮現(xiàn)電影里的畫面呈野,關(guān)于愛情的,關(guān)于友...
    落瀾洛2閱讀 253評論 0 0