? ? ? ?看標(biāo)題纸俭,先澄清节仿,并沒(méi)有什么學(xué)妹,也沒(méi)有做到定制化推薦掉蔬,那么抓了10年的數(shù)據(jù)做了什么廊宪,以及為什么會(huì)取這種沙雕標(biāo)題呢,后文有交代女轿。
? ? ? ?這次在一定程度上也算是薅了豆瓣的羊毛箭启,首先感謝豆瓣工程師們對(duì)我的小爬蟲的不殺之恩。在這里給豆瓣打個(gè)guanggao吧蛉迹,豆瓣電影日歷傅寡,制作精良,自用or送禮佳品北救,tb豆瓣旗艦店有售荐操。
? ? ? ?作為常年混跡豆瓣的老司機(jī),心里自然也有個(gè)大概的影視劇的觀影分?jǐn)?shù)區(qū)間珍策,一般來(lái)說(shuō)國(guó)外電影7分就可以一看托启,國(guó)內(nèi)稍微低一點(diǎn),6分以上基本也是不錯(cuò)的攘宙。話是這么說(shuō)屯耸,經(jīng)常逮蝦戶也是容易翻車的。
? ? ? ?這不蹭劈,前不久出差回來(lái)疗绣,一路舟車勞頓,說(shuō)看個(gè)電影放松下铺韧,一看豆瓣多矮,《fate stay night —— 天之杯:惡兆之花》評(píng)分8+(成文時(shí)電影分?jǐn)?shù)已降到7+),得嘞就是它了哈打。塔逃。讯壶。結(jié)果嘛,2星給特效患雏。
? ? ? ?影視劇種類繁多鹏溯,每種類別的觀影群眾組成也不一樣罢维,呈現(xiàn)的自然分?jǐn)?shù)也就有高有低淹仑。普遍來(lái)說(shuō),國(guó)外作品比國(guó)內(nèi)分?jǐn)?shù)高肺孵;電視劇比電影分?jǐn)?shù)高匀借。在這種大趨勢(shì)下,還是有很多不同平窘,上文的fate stay night就是個(gè)例子吓肋。總結(jié)來(lái)說(shuō):小眾往往高分瑰艘。
? ? ? ?基于此是鬼,我抓取了豆瓣網(wǎng)10年的電影電視劇數(shù)據(jù),對(duì)不同種類的影視劇做出了相應(yīng)的觀影推薦分?jǐn)?shù)紫新。
? ? ? ?那么為什么要取這個(gè)沙雕標(biāo)題呢均蜜?這就要說(shuō)到前幾天抓數(shù)據(jù)正來(lái)勁的時(shí)候,實(shí)驗(yàn)室群里有師兄分享了一篇爬蟲的博文《學(xué)妹來(lái)北京玩要吃烤鴨芒率,我寫了100行代碼爬了2000多個(gè)短評(píng)囤耳,就為了證明。偶芍。充择。》匪蟀,文章作者說(shuō)學(xué)妹去北京找他玩椎麦,非要吃全聚德烤鴨,他覺(jué)得全聚德烤鴨一般般材彪,學(xué)妹不信铃剔,他就寫了個(gè)爬蟲把餐館的評(píng)論都爬了下來(lái),要用數(shù)據(jù)證明自己說(shuō)的沒(méi)錯(cuò)查刻。键兜。。師兄還專門@我穗泵,說(shuō)你們程序員注孤身普气。
? ? ? ?我?佃延?现诀?
? ? ? ?首先夷磕,別人學(xué)妹想吃啥就去吃啊,你這還爬蟲仔沿,還證明坐桩,你咋不上天呢。
? ? ? ?其次封锉,這老哥就爬了一家的評(píng)論绵跷,技術(shù)含量不高。
? ? ? ?換成是我成福,不僅學(xué)妹想吃啥咱就吃啥碾局,咱還能通過(guò)爬蟲技術(shù),知道哪里還有好吃的奴艾,檔期內(nèi)什么電影值得一看净当,保證學(xué)妹吃好玩好。當(dāng)然蕴潦,那篇學(xué)妹文顯然是標(biāo)題黨像啼,標(biāo)題黨誰(shuí)不會(huì)呀。我也可以來(lái)一個(gè)《為了給50個(gè)可愛(ài)的學(xué)妹定制化推薦電影電視劇潭苞,我抓取了豆瓣十年影視數(shù)據(jù)》忽冻。
下面進(jìn)入正題,技術(shù)路線非常簡(jiǎn)單
1.抓取豆瓣網(wǎng)10年的電影電視劇數(shù)據(jù)萄传。
代碼就不貼在這里了甚颂,感興趣的小伙伴可以移步github(https://github.com/Oshima-Ryu/douban_spider)。
2.對(duì)影視劇按【國(guó)家/地區(qū)】進(jìn)行分類
? ? ? ?豆瓣10年的電影電視劇數(shù)量如下圖所示秀菱,在這里振诬,我們選擇美國(guó)、中國(guó)大陸衍菱、日本赶么、法國(guó)、英國(guó)脊串、韓國(guó)辫呻、香港的電影進(jìn)行后續(xù)統(tǒng)計(jì),選擇中國(guó)大陸琼锋、美國(guó)放闺、日本、韓國(guó)缕坎、英國(guó)怖侦、泰國(guó)的電視劇進(jìn)行后續(xù)統(tǒng)計(jì)。
3.對(duì)各個(gè)國(guó)家/地區(qū),對(duì)不同的影視劇類別進(jìn)行分?jǐn)?shù)區(qū)間統(tǒng)計(jì)
? ? ? ?不同國(guó)家/地區(qū)的電影電視劇分?jǐn)?shù)分布區(qū)別迥異匾寝,這里我們將美國(guó)搬葬、中國(guó)大陸、日本的電影電視劇可視化艳悔。
? ? ? ?圖片可能看不清楚急凰,簡(jiǎn)單闡述一下:左列為電影、右列為電視劇猜年,從上到下依次為美國(guó)抡锈、中國(guó)大陸、日本码倦。x軸為分?jǐn)?shù)(0-10)企孩,y軸為電影數(shù)量锭碳。不同顏色代表不同的影視種類(如:劇情袁稽、喜劇、科幻擒抛、愛(ài)情等)推汽。
? ? ? ?可以看到,電影方面歧沪,美日分?jǐn)?shù)較為均衡歹撒,日本動(dòng)畫電影分?jǐn)?shù)偏高(左下橙色),中國(guó)普遍偏低诊胞。電視劇方面暖夭,美國(guó)普遍偏高,中日較為均衡撵孤。
? ? ? ?這里對(duì)不同國(guó)家/地區(qū)迈着,不同類別的影視劇進(jìn)行分類,對(duì)每一種分類邪码,使用最簡(jiǎn)單的正太劃分裕菠,將影視劇分?jǐn)?shù)劃分為四個(gè)區(qū)間:
十分優(yōu)秀 | 可以一看 | 不推薦 | 浪費(fèi)生命 |
---|---|---|---|
>75% | 75%~50% | 50%~25% | <25% |
比如>75%,就是比該類型75%的影視劇分?jǐn)?shù)高闭专,也就是該類型影視劇前25%的分?jǐn)?shù)線奴潘,屬于非常優(yōu)秀,50%影钉、25%同理画髓。
對(duì)每種類別的影視劇進(jìn)行分?jǐn)?shù)區(qū)間劃分,得到分?jǐn)?shù)線劃分平委,最終結(jié)果如下圖奈虾。
電影:
電視劇:
? ? ? ?本文方法很多可以改進(jìn)之處,也有諸多不合理之處愚墓,還是希望這篇自?shī)首詷?lè)的博文能有一點(diǎn)參考價(jià)值予权。感謝閱讀到這里的老哥們,祝新春快樂(lè)浪册!
最后
這個(gè)世界上有那么多有錢人扫腺、有才華的人、多愁善感的人村象、野蠻人笆环,就只有這個(gè)人會(huì)讓你開心的笑『裾撸——電影《初吻》
? ? ? ?這個(gè)分?jǐn)?shù)區(qū)間可以在一定程度上反映出大眾的喜好躁劣,但是個(gè)人喜歡一部電影可以有各種原因,喜歡這種題材库菲;喜歡某個(gè)場(chǎng)景某句臺(tái)詞账忘;或者說(shuō)你超愛(ài)石原里美,她的電影都是神作熙宇。
? ? ? ?就算不小心踩了坑鳖擒,和朋友們吐槽不也挺有趣嗎,或者也可以閑得蛋疼寫一篇《為了給學(xué)妹推薦電影...》烫止。
? ? ? ?今年的賀歲檔蒋荚,質(zhì)量都很不錯(cuò),老哥們約起來(lái)撒馆蠕。