上一次被Magic Leap刷純?cè)诟羞€是一年前大家在朋友圈瘋傳體育館里鯨魚蹦出水面的畫面盆犁。一年過去背伴,又有消息從美國(guó)佛羅里達(dá)郊區(qū)的Magic Leap研發(fā)中心蹦出來了宫纬。這次這家耐心低調(diào)的創(chuàng)業(yè)公司發(fā)布了新的演示視頻 “A New Morning"训貌,展示產(chǎn)品目前的研發(fā)成果既棺。
之前對(duì)Magic Leap的技術(shù)定位限制在 AR 增強(qiáng)現(xiàn)實(shí)的領(lǐng)域,但隨著現(xiàn)實(shí)世界與虛擬世界的交互反饋增多嫡纠,Mixed Reality 混合現(xiàn)實(shí)被提出來專門描述這一類基于現(xiàn)實(shí)的模擬烦租。在混合現(xiàn)實(shí)中,虛擬的物體會(huì)被現(xiàn)實(shí)世界的真實(shí)物體所遮蓋除盏,比如掉到地上的虛擬皮球會(huì)被桌子遮蓋左权,需要低頭尋找,以此展現(xiàn)出更真實(shí)的交互體驗(yàn)痴颊。
從交互方式上看,A New Morning 呈現(xiàn)了三種方法屡贺。
第一種方式與體育館里的鯨魚無異蠢棱,即在現(xiàn)實(shí)空間中展現(xiàn)動(dòng)態(tài)的虛擬物體。這類模擬的觸發(fā)類似于系統(tǒng)分析后的自動(dòng)跳出甩栈,無需與現(xiàn)實(shí)物體有實(shí)體交互泻仙。
第二種交互方式是根據(jù)現(xiàn)實(shí)世界中的產(chǎn)品或動(dòng)作調(diào)出虛擬內(nèi)容。比如下圖中跳出的虛擬任務(wù)清單和天氣預(yù)報(bào)量没。具體的觸發(fā)和操作方式 Magic Leap在視頻中沒有解釋玉转,但根據(jù)其游戲端的觸發(fā)方式,可能是檢測(cè)到實(shí)體記事本觸發(fā)了虛擬界面殴蹄。
槍戰(zhàn)游戲概念中洪唐,在桌子上拍一下钻蔑,酷炫拽的手槍馬上就被召喚出來了陕壹,還配有不同的顏色光效。非常適合coffee break的時(shí)候在辦公室和同事大戰(zhàn)一場(chǎng)绑嘹。
模擬小象的視頻也是基于對(duì)手部探測(cè)的原理。系統(tǒng)檢測(cè)到了手這一現(xiàn)實(shí)物體橘茉,計(jì)算手的位置工腋,并在其位置上生成小象的動(dòng)態(tài)。在技術(shù)上畅卓,實(shí)現(xiàn)這部分功能用到的是 SLAM (Simultaneous Localization And Mapping) 定位與地圖構(gòu)建技術(shù)擅腰。設(shè)備通過各種攝像頭與傳感器探測(cè)真實(shí)物體在三維空間中的準(zhǔn)確位置,在其基礎(chǔ)上做虛擬物體的構(gòu)建翁潘。
第三種交互是在召喚出一級(jí)頁面后還能召喚二級(jí)頁面趁冈,二級(jí)頁面還能進(jìn)行旋轉(zhuǎn),伸縮等變化唐础。這可以大幅度顛覆網(wǎng)購(gòu)體驗(yàn)箱歧,還能幫選擇困難癥用戶縮減換裝時(shí)間。比如買鞋子一膨,把同款不同色的鞋一個(gè)一個(gè)對(duì)著腳比劃呀邢,簡(jiǎn)單方便。
技術(shù)還支持從平面到三維的轉(zhuǎn)換豹绪。目前這段演示視頻的目的還是以內(nèi)容介紹為主价淌,介紹攀登珠峰的人物年代與歷史。技術(shù)成熟后可以用來做3D產(chǎn)品的Demo瞒津。比如建筑設(shè)計(jì)提案蝉衣,游樂園區(qū)服務(wù)流程規(guī)劃等,從零到一介紹設(shè)計(jì)思路巷蚪。
基于 A New Morning 視頻里的交互就介紹到這病毡,但這家創(chuàng)業(yè)公司還有更多驚喜。Magic Leap在早幾個(gè)月曾發(fā)布過一系列專利報(bào)告屁柏,其中多達(dá)百頁的交互方式專利引起了市場(chǎng)的關(guān)注啦膜。我從報(bào)告中挑選了幾個(gè)個(gè)人比較感興趣的交互方式和界面,在此進(jìn)行介紹淌喻。
混合現(xiàn)實(shí)的一切起源于控制僧家。Magic Leap 預(yù)示的方式是通過四個(gè)手指控制的交互。當(dāng)用戶舉起手的時(shí)候裸删,系統(tǒng)中的圖像識(shí)別將展現(xiàn)出導(dǎo)航菜單八拱。每個(gè)手指負(fù)責(zé)不同的信息類型,比如食指負(fù)責(zé)社交媒體或電話,中指負(fù)責(zé)效率性生產(chǎn)文件如日程清單肌稻,無名指負(fù)責(zé)娛樂清蚀,小指負(fù)責(zé)各種工具的觸發(fā)。
界面初始的控制手勢(shì)是通過 Swipe 滑動(dòng)灯萍,召喚出環(huán)繞型的選擇菜單界面轧铁,即Portal 門戶界面。用戶從中選擇要進(jìn)入的子程序旦棉。用戶還可以通過兩只手指對(duì)角線拉伸的方式召喚出拍照功能齿风。可拓展的環(huán)形菜單永遠(yuǎn)位于視覺的右上角等待召喚绑洛。
門戶界面可以在各種大小的產(chǎn)品上打開救斑,通過拉伸手勢(shì)進(jìn)行放大縮小的控制。
展現(xiàn)3D模型的方法與拉伸相同真屯。這個(gè)手勢(shì)在Leap Motion中非常常見脸候。
以下是Leap Motion在虛擬世界中構(gòu)建3D物體的控制方式。通過藍(lán)色控制點(diǎn)拉伸出3D體塊绑蔫,體塊可長(zhǎng)可短运沦。Leap Motion在手勢(shì)交互上研究更深,也有開源的Lab讓開發(fā)者嘗試各種控制方式配深,有興趣可以去看看携添。
這個(gè)移動(dòng)和點(diǎn)亮的方式感覺像站在宇宙空間站看地球點(diǎn)燈的瞬間。
在使用場(chǎng)景的交互上篓叶,Magic Leap也提出了集中創(chuàng)意性的解決方案烈掠。
第一個(gè)使用場(chǎng)景針對(duì)超市購(gòu)物「淄校混合現(xiàn)實(shí)技術(shù)幫助用戶查看產(chǎn)品介紹左敌,挑選商品。
除了更便捷地展現(xiàn)商品信息外俐镐,兒童的購(gòu)物體驗(yàn)也得到了豐富矫限。比如具有教育意義的食品分類挑戰(zhàn),讓兒童在購(gòu)物過程中將全世界不同國(guó)家的食品進(jìn)行分類佩抹,寓教于樂奇唤。
或是互動(dòng)性的廣告宣傳,兒童注意到惡魔爬出了谷物盒匹摇,用動(dòng)效吸引兒童的注意。兒童揮動(dòng)手腕甲葬,惡魔將會(huì)重新回到谷物盒當(dāng)中廊勃。
第二個(gè)場(chǎng)景為多個(gè)醫(yī)療團(tuán)隊(duì)針對(duì)一場(chǎng)心臟手術(shù)的討論和實(shí)施。外科醫(yī)生能夠參考3D解剖圖中的心臟位置,來提升手術(shù)的精確度坡垫。同時(shí)醫(yī)學(xué)專家可以遠(yuǎn)程觀察手術(shù)梭灿,及時(shí)了解病人的狀態(tài),以避免關(guān)鍵性錯(cuò)誤冰悠。
這個(gè)場(chǎng)景圖也在其官網(wǎng)上展示堡妒。個(gè)人對(duì)Magic Leap的未來還是非常看好的溉卓。掌握史上最大的C輪融資和一堆硅谷大牛皮迟,Magic Leap能再度推出什么黑科技和實(shí)體產(chǎn)品,讓我們拭目以待桑寨。
參考閱讀:
Magic Leap 原理:http://www.im2maker.com/news/20151107/919.html
斯坦福大神的原理介紹:http://geekpark.baijia.baidu.com/article/219553
連線對(duì)Magic Leap的采訪:https://www.wired.com/2016/04/magic-leap-vr/