AI學(xué)會(huì)看電影

姓名:蔣雪健? ? ? ? ? 學(xué)號(hào):16020130066

轉(zhuǎn)自it之家

【嵌牛導(dǎo)讀】麻省理工學(xué)院最近就公布了一項(xiàng)研究成果扔字,研究人員成功通過機(jī)器學(xué)習(xí)訓(xùn)練電腦來識(shí)別視頻中的情緒變化缰贝。這意味以后在視頻網(wǎng)站觀看各種視頻的時(shí)候,電腦也可能在觀察著你的喜怒哀樂。

【嵌牛鼻子】AI,分析

【嵌牛提問】AI如何分析情緒逆粹?

【嵌牛正文】據(jù)該團(tuán)隊(duì)的博客介紹,這項(xiàng)技術(shù)使用了一個(gè)自主開發(fā)的機(jī)器學(xué)習(xí)模型炫惩,依靠深度神經(jīng)網(wǎng)絡(luò)分析了數(shù)千部不同類型的視頻僻弹,包括電影、電視劇和短視頻等他嚷。

研究人員以一種「感情弧線」為指標(biāo)來評(píng)估視頻的不同片段引起的情緒是積極還是消極蹋绽,這種「感情弧線」的數(shù)值被研究人員稱為視覺效價(jià)(visual valence),并繪制了視頻中每個(gè)場景的情緒變化曲線圖筋蓖。


圖片發(fā)自簡書App


在情緒變化曲線圖中卸耘,x軸是以分鐘為單位的時(shí)間,y軸代表視覺效價(jià)(visual valence)粘咖,視覺效價(jià)的數(shù)值越高蚣抗,表示該時(shí)刻反映的情緒越積極。


圖片發(fā)自簡書App


研究人員以動(dòng)畫電影《飛屋環(huán)游記》中一段經(jīng)典片段來舉例瓮下,這段幾分鐘的蒙太奇片段翰铡,是老爺爺Carl回憶與妻子Ellie這一生的故事,講述了Carl小時(shí)候因熱愛探險(xiǎn)與Ellie相識(shí)讽坏、相愛再到生離死別的過程锭魔,感動(dòng)了無數(shù)觀眾。


圖片發(fā)自簡書App

從這段視頻的情緒變化曲線圖可以清楚看到路呜,在「Carl小時(shí)候探險(xiǎn)」迷捧、「Carl和Ellie婚后想生孩子」和「老年的Carl和Ellie擁抱」這幾個(gè)片段時(shí)觀眾的心情應(yīng)該是最好的,而在Ellie病逝后Carl獨(dú)自一人回到家中時(shí)的情緒最為低落胀葱。

也就是說漠秋,這項(xiàng)AI技術(shù)可以更為準(zhǔn)確地分析觀眾的笑點(diǎn)和淚點(diǎn),這對(duì)影視制作方來說十分有利抵屿。

據(jù)悉除了讓機(jī)器觀看視頻膛堤,研究人員也招募了志愿者來手動(dòng)為視頻中的不同片段標(biāo)注「情感標(biāo)簽」。


圖片發(fā)自簡書App

同時(shí)研究人員還會(huì)比對(duì)分析過的Vimeo上1500部短片下的評(píng)論晌该,來判斷觀眾對(duì)視頻的反應(yīng)是否和機(jī)器分析的一致肥荔。

在分析了大量視頻后,麻省理工學(xué)院的研究團(tuán)隊(duì)還發(fā)現(xiàn)觀眾對(duì)于大團(tuán)圓結(jié)局的故事往往更加青睞朝群。

其實(shí)之前也出現(xiàn)過利用AI分析觀眾反應(yīng)的技術(shù)燕耿,7月份迪士尼研究中心(Disney Research)就公布了一項(xiàng)用于觀察分析電影院中觀眾反應(yīng)的技術(shù)。


迪士尼這項(xiàng)技術(shù)名為分解變分自編碼器(factorized variational autoencoders)姜胖,與麻省理工學(xué)院的AI技術(shù)一樣是基于深度學(xué)習(xí)的神經(jīng)網(wǎng)絡(luò)誉帅。


圖片發(fā)自簡書App

(你看電影時(shí)的微笑,屬于哪個(gè)區(qū)間?圖自:Disney Research)

這項(xiàng)技術(shù)能通過捕捉電影院中觀眾的表情蚜锨,來分析觀眾的情緒档插,甚至在觀察某個(gè)觀眾十分鐘后還能預(yù)測他接下來的反應(yīng)。

從Netflix利用大數(shù)據(jù)分析拍攝《紙牌屋》成功之后亚再,內(nèi)容商對(duì)于數(shù)據(jù)搜集和分析的能力要求越來越高郭膛,而隨著人工智能的發(fā)展,這項(xiàng)任務(wù)也被寄托到基于深度學(xué)習(xí)的神經(jīng)網(wǎng)絡(luò)上氛悬。

在今年的倫敦科幻電影節(jié)上则剃,第一部由人工智能編劇的電影短片 Sunspring 就曾亮相,并參加了48小時(shí)挑戰(zhàn)單元競賽如捅,這件事本身就挺科幻棍现。

正如麻省理工學(xué)院在博客中所說,隨著講故事的人越來越認(rèn)識(shí)到人工智能的價(jià)值镜遣,以及使用AI工具的門檻越來越低己肮,未來的影視和視頻的創(chuàng)作或許會(huì)因?yàn)槿斯ぶ悄艿慕槿攵l(fā)生重大改變。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末悲关,一起剝皮案震驚了整個(gè)濱河市谎僻,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌坚洽,老刑警劉巖戈稿,帶你破解...
    沈念sama閱讀 211,265評(píng)論 6 490
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件西土,死亡現(xiàn)場離奇詭異讶舰,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī)需了,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,078評(píng)論 2 385
  • 文/潘曉璐 我一進(jìn)店門跳昼,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人肋乍,你說我怎么就攤上這事鹅颊。” “怎么了墓造?”我有些...
    開封第一講書人閱讀 156,852評(píng)論 0 347
  • 文/不壞的土叔 我叫張陵堪伍,是天一觀的道長。 經(jīng)常有香客問我觅闽,道長帝雇,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 56,408評(píng)論 1 283
  • 正文 為了忘掉前任蛉拙,我火速辦了婚禮尸闸,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己吮廉,他們只是感情好苞尝,可當(dāng)我...
    茶點(diǎn)故事閱讀 65,445評(píng)論 5 384
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著宦芦,像睡著了一般宙址。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上踪旷,一...
    開封第一講書人閱讀 49,772評(píng)論 1 290
  • 那天曼氛,我揣著相機(jī)與錄音,去河邊找鬼令野。 笑死舀患,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的气破。 我是一名探鬼主播聊浅,決...
    沈念sama閱讀 38,921評(píng)論 3 406
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼现使!你這毒婦竟也來了低匙?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 37,688評(píng)論 0 266
  • 序言:老撾萬榮一對(duì)情侶失蹤碳锈,失蹤者是張志新(化名)和其女友劉穎顽冶,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體售碳,經(jīng)...
    沈念sama閱讀 44,130評(píng)論 1 303
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡强重,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,467評(píng)論 2 325
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了贸人。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片间景。...
    茶點(diǎn)故事閱讀 38,617評(píng)論 1 340
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖艺智,靈堂內(nèi)的尸體忽然破棺而出倘要,到底是詐尸還是另有隱情,我是刑警寧澤十拣,帶...
    沈念sama閱讀 34,276評(píng)論 4 329
  • 正文 年R本政府宣布封拧,位于F島的核電站,受9級(jí)特大地震影響夭问,放射性物質(zhì)發(fā)生泄漏泽西。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,882評(píng)論 3 312
  • 文/蒙蒙 一甲喝、第九天 我趴在偏房一處隱蔽的房頂上張望尝苇。 院中可真熱鬧铛只,春花似錦、人聲如沸糠溜。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,740評(píng)論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽非竿。三九已至蜕着,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間红柱,已是汗流浹背承匣。 一陣腳步聲響...
    開封第一講書人閱讀 31,967評(píng)論 1 265
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留锤悄,地道東北人韧骗。 一個(gè)月前我還...
    沈念sama閱讀 46,315評(píng)論 2 360
  • 正文 我出身青樓,卻偏偏與公主長得像零聚,于是被迫代替她去往敵國和親袍暴。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 43,486評(píng)論 2 348

推薦閱讀更多精彩內(nèi)容