Python3爬取ACM近期比賽數(shù)據(jù)并寫入Excel文檔

這個爬蟲是今年暑假時學完小甲魚的Python視頻后寫的鄙信。關于Python3的爬蟲教程不多著拭,下面只是使用了一些簡單的用法。

程序使用了xlwt包霜浴,用于創(chuàng)建Excel文檔并寫入數(shù)據(jù)够庙,安裝很簡單:pip install xlwt

關于ACM近期比賽恭应,下面的鏈接種給出了一個json格式的源數(shù)據(jù)。我們可以用Python的urllib下載下來首启,然后解析這個json即可暮屡。

http://contests.acmicpc.info/contests.json

import xlwt, json, urllib.request

def getDate():
    page = urllib.request.urlopen("http://contests.acmicpc.info/contests.json")
    return page.read().decode()

def getJson(s):
    j = json.loads(s)
    return j

def writeExcel(header, v):
    wb = xlwt.Workbook()
    ws = wb.add_sheet('Sheet1')
    for c in range(len(header)):
        ws.write(0, c, header[c])
        for r in range(len(v)):
            ws.write(r+1, c, v[r][header[c]])
    wb.save('Recent contests.xls')

header = ['oj', 'name', 'link', 'start_time', 'week', 'access']
writeExcel(header, getJson(getDate()))
最后編輯于
?著作權歸作者所有,轉載或內容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市毅桃,隨后出現(xiàn)的幾起案子褒纲,更是在濱河造成了極大的恐慌,老刑警劉巖钥飞,帶你破解...
    沈念sama閱讀 219,539評論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件莺掠,死亡現(xiàn)場離奇詭異,居然都是意外死亡读宙,警方通過查閱死者的電腦和手機彻秆,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,594評論 3 396
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人唇兑,你說我怎么就攤上這事酒朵。” “怎么了扎附?”我有些...
    開封第一講書人閱讀 165,871評論 0 356
  • 文/不壞的土叔 我叫張陵蔫耽,是天一觀的道長。 經常有香客問我留夜,道長匙铡,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,963評論 1 295
  • 正文 為了忘掉前任碍粥,我火速辦了婚禮鳖眼,結果婚禮上,老公的妹妹穿的比我還像新娘嚼摩。我一直安慰自己钦讳,他們只是感情好,可當我...
    茶點故事閱讀 67,984評論 6 393
  • 文/花漫 我一把揭開白布枕面。 她就那樣靜靜地躺著蜂厅,像睡著了一般。 火紅的嫁衣襯著肌膚如雪膊畴。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,763評論 1 307
  • 那天病游,我揣著相機與錄音唇跨,去河邊找鬼。 笑死衬衬,一個胖子當著我的面吹牛买猖,可吹牛的內容都是我干的。 我是一名探鬼主播滋尉,決...
    沈念sama閱讀 40,468評論 3 420
  • 文/蒼蘭香墨 我猛地睜開眼玉控,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了狮惜?” 一聲冷哼從身側響起高诺,我...
    開封第一講書人閱讀 39,357評論 0 276
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎碾篡,沒想到半個月后虱而,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經...
    沈念sama閱讀 45,850評論 1 317
  • 正文 獨居荒郊野嶺守林人離奇死亡开泽,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 38,002評論 3 338
  • 正文 我和宋清朗相戀三年牡拇,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 40,144評論 1 351
  • 序言:一個原本活蹦亂跳的男人離奇死亡惠呼,死狀恐怖导俘,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情剔蹋,我是刑警寧澤旅薄,帶...
    沈念sama閱讀 35,823評論 5 346
  • 正文 年R本政府宣布,位于F島的核電站滩租,受9級特大地震影響赋秀,放射性物質發(fā)生泄漏。R本人自食惡果不足惜律想,卻給世界環(huán)境...
    茶點故事閱讀 41,483評論 3 331
  • 文/蒙蒙 一猎莲、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧技即,春花似錦著洼、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,026評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至葵陵,卻和暖如春液荸,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背脱篙。 一陣腳步聲響...
    開封第一講書人閱讀 33,150評論 1 272
  • 我被黑心中介騙來泰國打工娇钱, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人绊困。 一個月前我還...
    沈念sama閱讀 48,415評論 3 373
  • 正文 我出身青樓文搂,卻偏偏與公主長得像,于是被迫代替她去往敵國和親秤朗。 傳聞我的和親對象是個殘疾皇子煤蹭,可洞房花燭夜當晚...
    茶點故事閱讀 45,092評論 2 355

推薦閱讀更多精彩內容