為了給可愛(ài)的學(xué)妹定制化推薦電影電視劇,我抓取了豆瓣影視的十年數(shù)據(jù)

? ? ? ?看標(biāo)題纸俭,先澄清节仿,并沒(méi)有什么學(xué)妹,也沒(méi)有做到定制化推薦掉蔬,那么抓了10年的數(shù)據(jù)做了什么廊宪,以及為什么會(huì)取這種沙雕標(biāo)題呢,后文有交代女轿。
? ? ? ?這次在一定程度上也算是薅了豆瓣的羊毛箭启,首先感謝豆瓣工程師們對(duì)我的小爬蟲的不殺之恩。在這里給豆瓣打個(gè)guanggao吧蛉迹,豆瓣電影日歷傅寡,制作精良,自用or送禮佳品北救,tb豆瓣旗艦店有售荐操。

豆瓣電影日歷

? ? ? ?作為常年混跡豆瓣的老司機(jī),心里自然也有個(gè)大概的影視劇的觀影分?jǐn)?shù)區(qū)間珍策,一般來(lái)說(shuō)國(guó)外電影7分就可以一看托启,國(guó)內(nèi)稍微低一點(diǎn),6分以上基本也是不錯(cuò)的攘宙。話是這么說(shuō)屯耸,經(jīng)常逮蝦戶也是容易翻車的。
? ? ? ?這不蹭劈,前不久出差回來(lái)疗绣,一路舟車勞頓,說(shuō)看個(gè)電影放松下铺韧,一看豆瓣多矮,《fate stay night —— 天之杯:惡兆之花》評(píng)分8+(成文時(shí)電影分?jǐn)?shù)已降到7+),得嘞就是它了哈打。塔逃。讯壶。結(jié)果嘛,2星給特效患雏。


fate stay night —— 天之杯:惡兆之花 豆瓣評(píng)分

? ? ? ?影視劇種類繁多鹏溯,每種類別的觀影群眾組成也不一樣罢维,呈現(xiàn)的自然分?jǐn)?shù)也就有高有低淹仑。普遍來(lái)說(shuō),國(guó)外作品比國(guó)內(nèi)分?jǐn)?shù)高肺孵;電視劇比電影分?jǐn)?shù)高匀借。在這種大趨勢(shì)下,還是有很多不同平窘,上文的fate stay night就是個(gè)例子吓肋。總結(jié)來(lái)說(shuō):小眾往往高分瑰艘。

? ? ? ?基于此是鬼,我抓取了豆瓣網(wǎng)10年的電影電視劇數(shù)據(jù),對(duì)不同種類的影視劇做出了相應(yīng)的觀影推薦分?jǐn)?shù)紫新。

? ? ? ?那么為什么要取這個(gè)沙雕標(biāo)題呢均蜜?這就要說(shuō)到前幾天抓數(shù)據(jù)正來(lái)勁的時(shí)候,實(shí)驗(yàn)室群里有師兄分享了一篇爬蟲的博文《學(xué)妹來(lái)北京玩要吃烤鴨芒率,我寫了100行代碼爬了2000多個(gè)短評(píng)囤耳,就為了證明。偶芍。充择。》匪蟀,文章作者說(shuō)學(xué)妹去北京找他玩椎麦,非要吃全聚德烤鴨,他覺(jué)得全聚德烤鴨一般般材彪,學(xué)妹不信铃剔,他就寫了個(gè)爬蟲把餐館的評(píng)論都爬了下來(lái),要用數(shù)據(jù)證明自己說(shuō)的沒(méi)錯(cuò)查刻。键兜。。師兄還專門@我穗泵,說(shuō)你們程序員注孤身普气。
? ? ? ?我?佃延?现诀?
? ? ? ?首先夷磕,別人學(xué)妹想吃啥就去吃啊,你這還爬蟲仔沿,還證明坐桩,你咋不上天呢。
? ? ? ?其次封锉,這老哥就爬了一家的評(píng)論绵跷,技術(shù)含量不高。
? ? ? ?換成是我成福,不僅學(xué)妹想吃啥咱就吃啥碾局,咱還能通過(guò)爬蟲技術(shù),知道哪里還有好吃的奴艾,檔期內(nèi)什么電影值得一看净当,保證學(xué)妹吃好玩好。當(dāng)然蕴潦,那篇學(xué)妹文顯然是標(biāo)題黨像啼,標(biāo)題黨誰(shuí)不會(huì)呀。我也可以來(lái)一個(gè)《為了給50個(gè)可愛(ài)的學(xué)妹定制化推薦電影電視劇潭苞,我抓取了豆瓣十年影視數(shù)據(jù)》忽冻。


下面進(jìn)入正題,技術(shù)路線非常簡(jiǎn)單
1.抓取豆瓣網(wǎng)10年的電影電視劇數(shù)據(jù)萄传。
代碼就不貼在這里了甚颂,感興趣的小伙伴可以移步github(https://github.com/Oshima-Ryu/douban_spider)。

2.對(duì)影視劇按【國(guó)家/地區(qū)】進(jìn)行分類
? ? ? ?豆瓣10年的電影電視劇數(shù)量如下圖所示秀菱,在這里振诬,我們選擇美國(guó)、中國(guó)大陸衍菱、日本赶么、法國(guó)、英國(guó)脊串、韓國(guó)辫呻、香港的電影進(jìn)行后續(xù)統(tǒng)計(jì),選擇中國(guó)大陸琼锋、美國(guó)放闺、日本、韓國(guó)缕坎、英國(guó)怖侦、泰國(guó)的電視劇進(jìn)行后續(xù)統(tǒng)計(jì)。

電影電視劇數(shù)量

3.對(duì)各個(gè)國(guó)家/地區(qū),對(duì)不同的影視劇類別進(jìn)行分?jǐn)?shù)區(qū)間統(tǒng)計(jì)
? ? ? ?不同國(guó)家/地區(qū)的電影電視劇分?jǐn)?shù)分布區(qū)別迥異匾寝,這里我們將美國(guó)搬葬、中國(guó)大陸、日本的電影電視劇可視化艳悔。
? ? ? ?圖片可能看不清楚急凰,簡(jiǎn)單闡述一下:左列為電影、右列為電視劇猜年,從上到下依次為美國(guó)抡锈、中國(guó)大陸、日本码倦。x軸為分?jǐn)?shù)(0-10)企孩,y軸為電影數(shù)量锭碳。不同顏色代表不同的影視種類(如:劇情袁稽、喜劇、科幻擒抛、愛(ài)情等)推汽。
? ? ? ?可以看到,電影方面歧沪,美日分?jǐn)?shù)較為均衡歹撒,日本動(dòng)畫電影分?jǐn)?shù)偏高(左下橙色),中國(guó)普遍偏低诊胞。電視劇方面暖夭,美國(guó)普遍偏高,中日較為均衡撵孤。

美中日電影電視劇打分區(qū)間

? ? ? ?這里對(duì)不同國(guó)家/地區(qū)迈着,不同類別的影視劇進(jìn)行分類,對(duì)每一種分類邪码,使用最簡(jiǎn)單的正太劃分裕菠,將影視劇分?jǐn)?shù)劃分為四個(gè)區(qū)間:

十分優(yōu)秀 可以一看 不推薦 浪費(fèi)生命
>75% 75%~50% 50%~25% <25%

比如>75%,就是比該類型75%的影視劇分?jǐn)?shù)高闭专,也就是該類型影視劇前25%的分?jǐn)?shù)線奴潘,屬于非常優(yōu)秀,50%影钉、25%同理画髓。
對(duì)每種類別的影視劇進(jìn)行分?jǐn)?shù)區(qū)間劃分,得到分?jǐn)?shù)線劃分平委,最終結(jié)果如下圖奈虾。

電影:

電影分?jǐn)?shù)區(qū)間

電視劇:

電視劇分?jǐn)?shù)區(qū)間

? ? ? ?本文方法很多可以改進(jìn)之處,也有諸多不合理之處愚墓,還是希望這篇自?shī)首詷?lè)的博文能有一點(diǎn)參考價(jià)值予权。感謝閱讀到這里的老哥們,祝新春快樂(lè)浪册!


最后

這個(gè)世界上有那么多有錢人扫腺、有才華的人、多愁善感的人村象、野蠻人笆环,就只有這個(gè)人會(huì)讓你開心的笑『裾撸——電影《初吻》

? ? ? ?這個(gè)分?jǐn)?shù)區(qū)間可以在一定程度上反映出大眾的喜好躁劣,但是個(gè)人喜歡一部電影可以有各種原因,喜歡這種題材库菲;喜歡某個(gè)場(chǎng)景某句臺(tái)詞账忘;或者說(shuō)你超愛(ài)石原里美,她的電影都是神作熙宇。

? ? ? ?就算不小心踩了坑鳖擒,和朋友們吐槽不也挺有趣嗎,或者也可以閑得蛋疼寫一篇《為了給學(xué)妹推薦電影...》烫止。

? ? ? ?今年的賀歲檔蒋荚,質(zhì)量都很不錯(cuò),老哥們約起來(lái)撒馆蠕。


2019賀歲檔
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末期升,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子互躬,更是在濱河造成了極大的恐慌播赁,老刑警劉巖,帶你破解...
    沈念sama閱讀 212,542評(píng)論 6 493
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件吨铸,死亡現(xiàn)場(chǎng)離奇詭異行拢,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī)诞吱,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,596評(píng)論 3 385
  • 文/潘曉璐 我一進(jìn)店門舟奠,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái),“玉大人房维,你說(shuō)我怎么就攤上這事沼瘫。” “怎么了咙俩?”我有些...
    開封第一講書人閱讀 158,021評(píng)論 0 348
  • 文/不壞的土叔 我叫張陵耿戚,是天一觀的道長(zhǎng)湿故。 經(jīng)常有香客問(wèn)我,道長(zhǎng)膜蛔,這世上最難降的妖魔是什么坛猪? 我笑而不...
    開封第一講書人閱讀 56,682評(píng)論 1 284
  • 正文 為了忘掉前任,我火速辦了婚禮皂股,結(jié)果婚禮上墅茉,老公的妹妹穿的比我還像新娘。我一直安慰自己呜呐,他們只是感情好就斤,可當(dāng)我...
    茶點(diǎn)故事閱讀 65,792評(píng)論 6 386
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著蘑辑,像睡著了一般洋机。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上洋魂,一...
    開封第一講書人閱讀 49,985評(píng)論 1 291
  • 那天绷旗,我揣著相機(jī)與錄音,去河邊找鬼忧设。 笑死刁标,一個(gè)胖子當(dāng)著我的面吹牛颠通,可吹牛的內(nèi)容都是我干的址晕。 我是一名探鬼主播,決...
    沈念sama閱讀 39,107評(píng)論 3 410
  • 文/蒼蘭香墨 我猛地睜開眼顿锰,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼谨垃!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起硼控,我...
    開封第一講書人閱讀 37,845評(píng)論 0 268
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤刘陶,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后牢撼,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體匙隔,經(jīng)...
    沈念sama閱讀 44,299評(píng)論 1 303
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,612評(píng)論 2 327
  • 正文 我和宋清朗相戀三年熏版,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了纷责。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 38,747評(píng)論 1 341
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡撼短,死狀恐怖再膳,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情曲横,我是刑警寧澤喂柒,帶...
    沈念sama閱讀 34,441評(píng)論 4 333
  • 正文 年R本政府宣布,位于F島的核電站,受9級(jí)特大地震影響灾杰,放射性物質(zhì)發(fā)生泄漏蚊丐。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 40,072評(píng)論 3 317
  • 文/蒙蒙 一艳吠、第九天 我趴在偏房一處隱蔽的房頂上張望吠撮。 院中可真熱鬧,春花似錦讲竿、人聲如沸泥兰。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,828評(píng)論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)鞋诗。三九已至,卻和暖如春迈嘹,著一層夾襖步出監(jiān)牢的瞬間削彬,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 32,069評(píng)論 1 267
  • 我被黑心中介騙來(lái)泰國(guó)打工秀仲, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留融痛,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 46,545評(píng)論 2 362
  • 正文 我出身青樓神僵,卻偏偏與公主長(zhǎng)得像雁刷,于是被迫代替她去往敵國(guó)和親保礼。 傳聞我的和親對(duì)象是個(gè)殘疾皇子沛励,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 43,658評(píng)論 2 350

推薦閱讀更多精彩內(nèi)容