這篇文章講的是怎么通過立體采集技術(shù)(Volumetric Capture)來做一種新的VR戲劇寂拆。戲的名字叫做《Dill Pickle》。
我查了查怀各,《A Dill Pickle》(中文譯名《蒔蘿泡菜》)是一篇經(jīng)典的英文小說乌企,作者曼斯菲爾德(Mansfield)拱层,文學(xué)性和戲劇沖突性都很好。大學(xué)英語課本里面有收錄绿渣,也有相關(guān)的研究文章[1]朝群。同樣的,好像學(xué)生也很喜歡拿他拍點練手作品[^2] 中符。具體的劇情姜胖,可以參考隔夜剩飯,何堪再食---《蒔蘿泡菜》個人化翻譯淀散。
而Volumetric Capture 應(yīng)該是配合 Volumetric Video 出來的前端數(shù)據(jù)采集方式右莱,查了查蚜锨,現(xiàn)在SONY[2]、CANON[3]都有自己的立體視頻解決方案隧出。這個東西還是挺新的踏志,國內(nèi)也有重點研發(fā)計劃剛剛完成相關(guān)的工作[4]。
采集系統(tǒng)
這篇文章的作者用到了TetaVi的產(chǎn)品進(jìn)行體積采集胀瞪。這個采集系統(tǒng)用到了12個RGB攝像頭针余,8個紅外線深度傳感器和8個紅外線的結(jié)構(gòu)光投影機。整個系統(tǒng)可以采集一個5英尺范圍內(nèi)的空間場景凄诞。
戲劇設(shè)計
場景設(shè)計
生成的場景是一個對話場景圆雁,場景中有酒吧、藝術(shù)品和家具帆谍。在場景設(shè)計中伪朽,使用了紐約曼哈頓的拍賣交易所真實物體的1萬張圖片,從而重建了戲劇場景中的酒吧汛蝙、藝術(shù)品和家具等道具烈涮。
情節(jié)設(shè)計
男演員所飾演的“Vera”會坐在沙發(fā)上給觀眾打招呼。觀眾必須使用預(yù)設(shè)定的對話跟男演員對話窖剑,從而推動劇情發(fā)展坚洽。如果觀眾所說的話不是預(yù)設(shè)置的對話,那么全息的畫面就會停止西土,彈出提示讶舰,要求觀眾按照提示來完成對話。
男演員叫做Jim Thalman(很可惜需了,真不太認(rèn)識)跳昼。他在5英尺的圈子里面演戲,同時進(jìn)行體積采集肋乍,從而生成演員的3D圖像鹅颊。在采集圓形區(qū)域外有個助手。他會提示所說出的對話墓造,從而讓演員做出正確的反映挪略。
采集過程
拍攝采集是2段7分鐘的對話,總共拍攝了3次滔岳,最后形成了一段14分鐘的立體視頻杠娱。
觀眾反饋
觀眾反饋挺有意思。大致有以下幾點:
- 體驗感比以前的方式更強谱煤。原文作者認(rèn)為摊求,主要原因就是立體視頻會帶來更多的觀眾自由度,所以體驗感會更強刘离。
- 黑白視頻比彩色視頻更入戲室叉。彩色視頻會讓覺得更像游戲睹栖,黑白視頻則更容易跨越第四堵墻。原文沒有解釋原因茧痕,我個人的直覺理解是野来,觀眾心里的形式感在黑白視頻中更容易建立∽倏酰或者是我常常說的“儀式感”曼氛,這種讓人帶著一種正式或略嚴(yán)肅的心態(tài)區(qū)體會某種事物的感覺。
主要問題
- 體積視頻最大的體驗問題還是來自于計算機技術(shù)存在的不足令野。演員的3D形象在肢體終端是有缺失的舀患,比如手指、腳部的細(xì)節(jié)气破,目前還比較難得到完整的浮現(xiàn)聊浅。
- 對于戲劇本身來說,演員和觀眾的眼神交互现使,其實是戲劇傳情的一個重要方面〉统祝現(xiàn)在的表演設(shè)計時,沒辦法實現(xiàn)演員和觀眾的眼神交互碳锈,沒有eye contact努咐。這個可能需要橋段設(shè)計的創(chuàng)新,也可能需要技術(shù)裝置的創(chuàng)新殴胧,比如存在對于觀眾眼神觀測位置的反饋和通信機制。