python爬蟲學(xué)習(xí)之第一天

一舟奠、學(xué)習(xí)目標(biāo)

1.簡(jiǎn)單學(xué)會(huì)下載一個(gè)網(wǎng)頁(yè)。

2.學(xué)會(huì)使用urllib模塊中的urllib.request模塊房维。

3.簡(jiǎn)單理解爬取網(wǎng)頁(yè)的過(guò)程沼瘫。

二、代碼實(shí)現(xiàn)與簡(jiǎn)單說(shuō)明

importurllib.request ##導(dǎo)入request模塊

url_name="http://www.0510kg.com"##定義一個(gè)變量握巢,用來(lái)存儲(chǔ)需要下載的網(wǎng)址

file_text=urllib.request.urlopen(url_name)##使用urllib.request.urlopen()方法晕鹊,打開網(wǎng)頁(yè)

html_text=file_text.readlines()##使用readlines()方法松却,讀取網(wǎng)頁(yè)代碼暴浦,readlines讀取的是網(wǎng)頁(yè)的全部?jī)?nèi)容,返回一個(gè)列表變量

with open("1.html",'wb')as f:##將讀取結(jié)果存儲(chǔ)在程序當(dāng)前目錄的1.html文件中

f.writelines(html_text)##寫入讀取內(nèi)容到文件

三晓锻、查看根目錄歌焦,有1.html存在,打開文件可看見(jiàn)如下:


最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末砚哆,一起剝皮案震驚了整個(gè)濱河市独撇,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌躁锁,老刑警劉巖纷铣,帶你破解...
    沈念sama閱讀 217,277評(píng)論 6 503
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異战转,居然都是意外死亡搜立,警方通過(guò)查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,689評(píng)論 3 393
  • 文/潘曉璐 我一進(jìn)店門槐秧,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)啄踊,“玉大人,你說(shuō)我怎么就攤上這事刁标〉咄ǎ” “怎么了?”我有些...
    開封第一講書人閱讀 163,624評(píng)論 0 353
  • 文/不壞的土叔 我叫張陵膀懈,是天一觀的道長(zhǎng)顿锰。 經(jīng)常有香客問(wèn)我,道長(zhǎng),這世上最難降的妖魔是什么硼控? 我笑而不...
    開封第一講書人閱讀 58,356評(píng)論 1 293
  • 正文 為了忘掉前任乘客,我火速辦了婚禮,結(jié)果婚禮上淀歇,老公的妹妹穿的比我還像新娘易核。我一直安慰自己,他們只是感情好浪默,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,402評(píng)論 6 392
  • 文/花漫 我一把揭開白布牡直。 她就那樣靜靜地躺著,像睡著了一般纳决。 火紅的嫁衣襯著肌膚如雪碰逸。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,292評(píng)論 1 301
  • 那天阔加,我揣著相機(jī)與錄音饵史,去河邊找鬼。 笑死胜榔,一個(gè)胖子當(dāng)著我的面吹牛胳喷,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播夭织,決...
    沈念sama閱讀 40,135評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼吭露,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來(lái)了尊惰?” 一聲冷哼從身側(cè)響起讲竿,我...
    開封第一講書人閱讀 38,992評(píng)論 0 275
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎弄屡,沒(méi)想到半個(gè)月后题禀,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,429評(píng)論 1 314
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡膀捷,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,636評(píng)論 3 334
  • 正文 我和宋清朗相戀三年迈嘹,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片担孔。...
    茶點(diǎn)故事閱讀 39,785評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡江锨,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出糕篇,到底是詐尸還是另有隱情啄育,我是刑警寧澤,帶...
    沈念sama閱讀 35,492評(píng)論 5 345
  • 正文 年R本政府宣布拌消,位于F島的核電站挑豌,受9級(jí)特大地震影響安券,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜氓英,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,092評(píng)論 3 328
  • 文/蒙蒙 一侯勉、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧铝阐,春花似錦址貌、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,723評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至吹害,卻和暖如春螟凭,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背它呀。 一陣腳步聲響...
    開封第一講書人閱讀 32,858評(píng)論 1 269
  • 我被黑心中介騙來(lái)泰國(guó)打工螺男, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人纵穿。 一個(gè)月前我還...
    沈念sama閱讀 47,891評(píng)論 2 370
  • 正文 我出身青樓下隧,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親政恍。 傳聞我的和親對(duì)象是個(gè)殘疾皇子汪拥,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,713評(píng)論 2 354

推薦閱讀更多精彩內(nèi)容

  • http header 消息通常被分為4個(gè)部分:general header即頭部, request header...
    徐薇薇閱讀 32,003評(píng)論 0 5
  • 1 前言 作為一名合格的數(shù)據(jù)分析師,其完整的技術(shù)知識(shí)體系必須貫穿數(shù)據(jù)獲取篙耗、數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)提取宪赶、數(shù)據(jù)分析宗弯、數(shù)據(jù)挖掘、...
    whenif閱讀 18,072評(píng)論 45 523
  • Python爬蟲入門(urllib+Beautifulsoup) 本文包括:1搂妻、爬蟲簡(jiǎn)單介紹2蒙保、爬蟲架構(gòu)三大模塊3...
    廖少少閱讀 9,833評(píng)論 0 6
  • Spring Cloud為開發(fā)人員提供了快速構(gòu)建分布式系統(tǒng)中一些常見(jiàn)模式的工具(例如配置管理,服務(wù)發(fā)現(xiàn)欲主,斷路器邓厕,智...
    卡卡羅2017閱讀 134,654評(píng)論 18 139
  • 人生先應(yīng)該學(xué)會(huì)不抱怨 哎~怎么辦考試要到了我還沒(méi)學(xué)習(xí) 哎~怎么辦周末要過(guò)完了我的衣服還沒(méi)洗 哎~~ 其實(shí)我想說(shuō)的是...
    懵萌懵萌i閱讀 434評(píng)論 1 3