python知乎話題數(shù)據(jù)爬取及關(guān)系圖譜可視化

一、前言

學(xué)習(xí)python大半年悴势,也算基本入門。python作為一個簡單易學(xué)且具有強(qiáng)大生產(chǎn)力的工具措伐,在工作和生活中都提供了極大的助力特纤,項目中寫寫腳本、爬爬數(shù)據(jù)侥加,生活中幫朋友水水論文做做實(shí)驗都還是能夠勉強(qiáng)應(yīng)付捧存。雖然深知姿勢水平還需極大提高,但是方向太多担败,不知如何著手昔穴。一直都對知乎數(shù)據(jù)很感興趣,想做點(diǎn)什么提前,但始終沒有靜下心來付諸行動吗货,最近忙里偷閑,琢磨著也許可以借此機(jī)會逼著自己開始去系列化的學(xué)習(xí)來提高自己狈网。本次練手項目是基于知乎話題數(shù)據(jù)的簡單可視化宙搬,包括知乎數(shù)據(jù)的搜集(共獲取到33586個話題數(shù)據(jù)笨腥,不包含未分類話題以及丟失部分話題)和可視化兩個部分。數(shù)據(jù)在文末勇垛。

二扇雕、數(shù)據(jù)可視化:

可視化部分采用pyecharts包處理,chenjiandongx/pyecharts

1窥摄、關(guān)注人數(shù)維度分析

本次采集到知乎話題總數(shù)33586個镶奉,所有話題關(guān)注人數(shù)總量為592,534,475人,平均每個話題關(guān)注人數(shù)為17642人崭放。其中關(guān)注人數(shù)最多的話題是【電影】話題哨苛,關(guān)注人數(shù)為17,839,771人;話題關(guān)注人數(shù)TOP10币砂,如下圖所示:

知乎話題關(guān)注數(shù)TOP10

按照關(guān)注人數(shù)維度建峭,將話題按照關(guān)注人數(shù)1000W以上、100W~1000W决摧、10W~100W亿蒸、1W~10W、0~1W掌桩、0 六個等級進(jìn)行劃分边锁,其所占比例如下圖所示:

各關(guān)注度數(shù)量級上話題所占比例

從話題關(guān)注量來看,90%以上的話題其關(guān)注量都在1W以下波岛,這些話題中茅坛,又有70%的話題關(guān)注量集中在1K以下。

2则拷、話題關(guān)系可視化:

話題關(guān)系圖譜以知乎話題為節(jié)點(diǎn)贡蓖,父話題與子話題關(guān)系為連接線,節(jié)點(diǎn)越大表示關(guān)注度越高煌茬,按照節(jié)點(diǎn)關(guān)注量分布斥铺,將話題顏色標(biāo)識為7個等級。

話題關(guān)系網(wǎng)絡(luò)的產(chǎn)生坛善,是輸入一個話題晾蜘,然后逐級迭代,直至最后一級浑吟,關(guān)系網(wǎng)絡(luò)將是該話題下的整個話題樹的關(guān)系展示笙纤。越是頂級的話題,其關(guān)系圖譜會越復(fù)雜

【電影】話題關(guān)系圖组力。先直觀感受以下,關(guān)注量最多的【電影】話題的子話題關(guān)系圖抖拴。點(diǎn)擊圖片會清晰一點(diǎn)(不知道如何在知乎上傳高清大圖...o(╯□╰)o)

電影 話題關(guān)系圖譜

下面列表是關(guān)注度最高的TOP20電影燎字。

【明星】話題關(guān)系圖


明星 話題關(guān)系圖譜

明星關(guān)注度列表TOP20腥椒。哎喲,周杰倫排第一喲候衍。我渤哥關(guān)注量也過萬了:-D

【演員】話題關(guān)系圖笼蛛,演員節(jié)點(diǎn)旁邊的倉井優(yōu)看成了蒼井空(o(╯□╰)o)

演員 話題關(guān)系圖譜

演員列表top20

【旅行】話題關(guān)系圖

旅行 話題關(guān)系圖譜

旅行話題關(guān)注列表top20,自助游和窮游名列前茅Σ( ° △ °|||)︴蛉鹿,知乎窮游群體真這么大滨砍?

【知乎】和【豆瓣】話題關(guān)系圖

豆瓣 話題關(guān)系圖譜
知乎 話題關(guān)系圖譜

【數(shù)據(jù)】話題關(guān)系圖

【數(shù)據(jù)】話題關(guān)系圖譜

【數(shù)據(jù)庫】話題關(guān)系圖

【數(shù)據(jù)庫】話題關(guān)系圖

【數(shù)據(jù)分析】話題關(guān)系圖

【數(shù)據(jù)分析】話題關(guān)系圖

以及【Python】話題關(guān)系圖

【Python】話題關(guān)系圖

最后,老司機(jī)要開車了

【性生活】 話題關(guān)系圖

數(shù)據(jù)地址http://pan.baidu.com/s/1i46uCZz密碼 2m9p

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末妖异,一起剝皮案震驚了整個濱河市惋戏,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌他膳,老刑警劉巖响逢,帶你破解...
    沈念sama閱讀 206,968評論 6 482
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異棕孙,居然都是意外死亡舔亭,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,601評論 2 382
  • 文/潘曉璐 我一進(jìn)店門蟀俊,熙熙樓的掌柜王于貴愁眉苦臉地迎上來钦铺,“玉大人,你說我怎么就攤上這事肢预≈奥眨” “怎么了?”我有些...
    開封第一講書人閱讀 153,220評論 0 344
  • 文/不壞的土叔 我叫張陵误甚,是天一觀的道長缚甩。 經(jīng)常有香客問我,道長窑邦,這世上最難降的妖魔是什么擅威? 我笑而不...
    開封第一講書人閱讀 55,416評論 1 279
  • 正文 為了忘掉前任,我火速辦了婚禮冈钦,結(jié)果婚禮上郊丛,老公的妹妹穿的比我還像新娘。我一直安慰自己瞧筛,他們只是感情好厉熟,可當(dāng)我...
    茶點(diǎn)故事閱讀 64,425評論 5 374
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著较幌,像睡著了一般揍瑟。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上乍炉,一...
    開封第一講書人閱讀 49,144評論 1 285
  • 那天绢片,我揣著相機(jī)與錄音滤馍,去河邊找鬼。 笑死底循,一個胖子當(dāng)著我的面吹牛巢株,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播熙涤,決...
    沈念sama閱讀 38,432評論 3 401
  • 文/蒼蘭香墨 我猛地睜開眼阁苞,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了祠挫?” 一聲冷哼從身側(cè)響起那槽,我...
    開封第一講書人閱讀 37,088評論 0 261
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎茸歧,沒想到半個月后倦炒,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 43,586評論 1 300
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡软瞎,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,028評論 2 325
  • 正文 我和宋清朗相戀三年逢唤,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片涤浇。...
    茶點(diǎn)故事閱讀 38,137評論 1 334
  • 序言:一個原本活蹦亂跳的男人離奇死亡鳖藕,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出只锭,到底是詐尸還是另有隱情著恩,我是刑警寧澤,帶...
    沈念sama閱讀 33,783評論 4 324
  • 正文 年R本政府宣布蜻展,位于F島的核電站喉誊,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏纵顾。R本人自食惡果不足惜伍茄,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,343評論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望施逾。 院中可真熱鬧敷矫,春花似錦、人聲如沸汉额。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,333評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽蠕搜。三九已至怎茫,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間讥脐,已是汗流浹背遭居。 一陣腳步聲響...
    開封第一講書人閱讀 31,559評論 1 262
  • 我被黑心中介騙來泰國打工啼器, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留旬渠,地道東北人俱萍。 一個月前我還...
    沈念sama閱讀 45,595評論 2 355
  • 正文 我出身青樓,卻偏偏與公主長得像告丢,于是被迫代替她去往敵國和親枪蘑。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 42,901評論 2 345

推薦閱讀更多精彩內(nèi)容