由Magic Leap探討未來的交互方式

上一次被Magic Leap刷純?cè)诟羞€是一年前大家在朋友圈瘋傳體育館里鯨魚蹦出水面的畫面盆犁。一年過去背伴,又有消息從美國(guó)佛羅里達(dá)郊區(qū)的Magic Leap研發(fā)中心蹦出來了宫纬。這次這家耐心低調(diào)的創(chuàng)業(yè)公司發(fā)布了新的演示視頻 “A New Morning"训貌,展示產(chǎn)品目前的研發(fā)成果既棺。

之前對(duì)Magic Leap的技術(shù)定位限制在 AR 增強(qiáng)現(xiàn)實(shí)的領(lǐng)域,但隨著現(xiàn)實(shí)世界與虛擬世界的交互反饋增多嫡纠,Mixed Reality 混合現(xiàn)實(shí)被提出來專門描述這一類基于現(xiàn)實(shí)的模擬烦租。在混合現(xiàn)實(shí)中,虛擬的物體會(huì)被現(xiàn)實(shí)世界的真實(shí)物體所遮蓋除盏,比如掉到地上的虛擬皮球會(huì)被桌子遮蓋左权,需要低頭尋找,以此展現(xiàn)出更真實(shí)的交互體驗(yàn)痴颊。


從交互方式上看,A New Morning 呈現(xiàn)了三種方法屡贺。

第一種方式與體育館里的鯨魚無異蠢棱,在現(xiàn)實(shí)空間中展現(xiàn)動(dòng)態(tài)的虛擬物體。這類模擬的觸發(fā)類似于系統(tǒng)分析后的自動(dòng)跳出甩栈,無需與現(xiàn)實(shí)物體有實(shí)體交互泻仙。


第二種交互方式是根據(jù)現(xiàn)實(shí)世界中的產(chǎn)品或動(dòng)作調(diào)出虛擬內(nèi)容。比如下圖中跳出的虛擬任務(wù)清單和天氣預(yù)報(bào)量没。具體的觸發(fā)和操作方式 Magic Leap在視頻中沒有解釋玉转,但根據(jù)其游戲端的觸發(fā)方式,可能是檢測(cè)到實(shí)體記事本觸發(fā)了虛擬界面殴蹄。

槍戰(zhàn)游戲概念中洪唐,在桌子上拍一下钻蔑,酷炫拽的手槍馬上就被召喚出來了陕壹,還配有不同的顏色光效。非常適合coffee break的時(shí)候在辦公室和同事大戰(zhàn)一場(chǎng)绑嘹。

模擬小象的視頻也是基于對(duì)手部探測(cè)的原理。系統(tǒng)檢測(cè)到了手這一現(xiàn)實(shí)物體橘茉,計(jì)算手的位置工腋,并在其位置上生成小象的動(dòng)態(tài)。在技術(shù)上畅卓,實(shí)現(xiàn)這部分功能用到的是 SLAM (Simultaneous Localization And Mapping) 定位與地圖構(gòu)建技術(shù)擅腰。設(shè)備通過各種攝像頭與傳感器探測(cè)真實(shí)物體在三維空間中的準(zhǔn)確位置,在其基礎(chǔ)上做虛擬物體的構(gòu)建翁潘。


第三種交互是在召喚出一級(jí)頁面后還能召喚二級(jí)頁面趁冈,二級(jí)頁面還能進(jìn)行旋轉(zhuǎn),伸縮等變化唐础。這可以大幅度顛覆網(wǎng)購(gòu)體驗(yàn)箱歧,還能幫選擇困難癥用戶縮減換裝時(shí)間。比如買鞋子一膨,把同款不同色的鞋一個(gè)一個(gè)對(duì)著腳比劃呀邢,簡(jiǎn)單方便。

技術(shù)還支持從平面到三維的轉(zhuǎn)換豹绪。目前這段演示視頻的目的還是以內(nèi)容介紹為主价淌,介紹攀登珠峰的人物年代與歷史。技術(shù)成熟后可以用來做3D產(chǎn)品的Demo瞒津。比如建筑設(shè)計(jì)提案蝉衣,游樂園區(qū)服務(wù)流程規(guī)劃等,從零到一介紹設(shè)計(jì)思路巷蚪。


基于 A New Morning 視頻里的交互就介紹到這病毡,但這家創(chuàng)業(yè)公司還有更多驚喜。Magic Leap在早幾個(gè)月曾發(fā)布過一系列專利報(bào)告屁柏,其中多達(dá)百頁的交互方式專利引起了市場(chǎng)的關(guān)注啦膜。我從報(bào)告中挑選了幾個(gè)個(gè)人比較感興趣的交互方式和界面,在此進(jìn)行介紹淌喻。

混合現(xiàn)實(shí)的一切起源于控制僧家。Magic Leap 預(yù)示的方式是通過四個(gè)手指控制的交互。當(dāng)用戶舉起手的時(shí)候裸删,系統(tǒng)中的圖像識(shí)別將展現(xiàn)出導(dǎo)航菜單八拱。每個(gè)手指負(fù)責(zé)不同的信息類型,比如食指負(fù)責(zé)社交媒體或電話,中指負(fù)責(zé)效率性生產(chǎn)文件如日程清單肌稻,無名指負(fù)責(zé)娛樂清蚀,小指負(fù)責(zé)各種工具的觸發(fā)。

界面初始的控制手勢(shì)是通過 Swipe 滑動(dòng)灯萍,召喚出環(huán)繞型的選擇菜單界面轧铁,即Portal 門戶界面。用戶從中選擇要進(jìn)入的子程序旦棉。用戶還可以通過兩只手指對(duì)角線拉伸的方式召喚出拍照功能齿风。可拓展的環(huán)形菜單永遠(yuǎn)位于視覺的右上角等待召喚绑洛。

門戶界面可以在各種大小的產(chǎn)品上打開救斑,通過拉伸手勢(shì)進(jìn)行放大縮小的控制。

展現(xiàn)3D模型的方法與拉伸相同真屯。這個(gè)手勢(shì)在Leap Motion中非常常見脸候。

以下是Leap Motion在虛擬世界中構(gòu)建3D物體的控制方式。通過藍(lán)色控制點(diǎn)拉伸出3D體塊绑蔫,體塊可長(zhǎng)可短运沦。Leap Motion在手勢(shì)交互上研究更深,也有開源的Lab讓開發(fā)者嘗試各種控制方式配深,有興趣可以去看看携添。

這個(gè)移動(dòng)和點(diǎn)亮的方式感覺像站在宇宙空間站看地球點(diǎn)燈的瞬間。


在使用場(chǎng)景的交互上篓叶,Magic Leap也提出了集中創(chuàng)意性的解決方案烈掠。

第一個(gè)使用場(chǎng)景針對(duì)超市購(gòu)物「淄校混合現(xiàn)實(shí)技術(shù)幫助用戶查看產(chǎn)品介紹左敌,挑選商品。

除了更便捷地展現(xiàn)商品信息外俐镐,兒童的購(gòu)物體驗(yàn)也得到了豐富矫限。比如具有教育意義的食品分類挑戰(zhàn),讓兒童在購(gòu)物過程中將全世界不同國(guó)家的食品進(jìn)行分類佩抹,寓教于樂奇唤。

或是互動(dòng)性的廣告宣傳,兒童注意到惡魔爬出了谷物盒匹摇,用動(dòng)效吸引兒童的注意。兒童揮動(dòng)手腕甲葬,惡魔將會(huì)重新回到谷物盒當(dāng)中廊勃。

第二個(gè)場(chǎng)景為多個(gè)醫(yī)療團(tuán)隊(duì)針對(duì)一場(chǎng)心臟手術(shù)的討論和實(shí)施。外科醫(yī)生能夠參考3D解剖圖中的心臟位置,來提升手術(shù)的精確度坡垫。同時(shí)醫(yī)學(xué)專家可以遠(yuǎn)程觀察手術(shù)梭灿,及時(shí)了解病人的狀態(tài),以避免關(guān)鍵性錯(cuò)誤冰悠。

這個(gè)場(chǎng)景圖也在其官網(wǎng)上展示堡妒。個(gè)人對(duì)Magic Leap的未來還是非常看好的溉卓。掌握史上最大的C輪融資和一堆硅谷大牛皮迟,Magic Leap能再度推出什么黑科技和實(shí)體產(chǎn)品,讓我們拭目以待桑寨。


參考閱讀:

Magic Leap 原理:http://www.im2maker.com/news/20151107/919.html

斯坦福大神的原理介紹:http://geekpark.baijia.baidu.com/article/219553

連線對(duì)Magic Leap的采訪:https://www.wired.com/2016/04/magic-leap-vr/

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末伏尼,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子尉尾,更是在濱河造成了極大的恐慌爆阶,老刑警劉巖,帶你破解...
    沈念sama閱讀 211,348評(píng)論 6 491
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件沙咏,死亡現(xiàn)場(chǎng)離奇詭異辨图,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī)肢藐,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,122評(píng)論 2 385
  • 文/潘曉璐 我一進(jìn)店門故河,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人窖壕,你說我怎么就攤上這事忧勿。” “怎么了瞻讽?”我有些...
    開封第一講書人閱讀 156,936評(píng)論 0 347
  • 文/不壞的土叔 我叫張陵鸳吸,是天一觀的道長(zhǎng)。 經(jīng)常有香客問我速勇,道長(zhǎng)晌砾,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 56,427評(píng)論 1 283
  • 正文 為了忘掉前任烦磁,我火速辦了婚禮养匈,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘都伪。我一直安慰自己呕乎,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 65,467評(píng)論 6 385
  • 文/花漫 我一把揭開白布陨晶。 她就那樣靜靜地躺著猬仁,像睡著了一般帝璧。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上湿刽,一...
    開封第一講書人閱讀 49,785評(píng)論 1 290
  • 那天的烁,我揣著相機(jī)與錄音,去河邊找鬼诈闺。 笑死渴庆,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的雅镊。 我是一名探鬼主播襟雷,決...
    沈念sama閱讀 38,931評(píng)論 3 406
  • 文/蒼蘭香墨 我猛地睜開眼,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼漓穿!你這毒婦竟也來了嗤军?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 37,696評(píng)論 0 266
  • 序言:老撾萬榮一對(duì)情侶失蹤晃危,失蹤者是張志新(化名)和其女友劉穎叙赚,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體僚饭,經(jīng)...
    沈念sama閱讀 44,141評(píng)論 1 303
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡震叮,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,483評(píng)論 2 327
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了鳍鸵。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片苇瓣。...
    茶點(diǎn)故事閱讀 38,625評(píng)論 1 340
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖偿乖,靈堂內(nèi)的尸體忽然破棺而出击罪,到底是詐尸還是另有隱情,我是刑警寧澤贪薪,帶...
    沈念sama閱讀 34,291評(píng)論 4 329
  • 正文 年R本政府宣布媳禁,位于F島的核電站,受9級(jí)特大地震影響画切,放射性物質(zhì)發(fā)生泄漏竣稽。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,892評(píng)論 3 312
  • 文/蒙蒙 一霍弹、第九天 我趴在偏房一處隱蔽的房頂上張望毫别。 院中可真熱鬧,春花似錦典格、人聲如沸岛宦。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,741評(píng)論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽恋博。三九已至齐佳,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間债沮,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 31,977評(píng)論 1 265
  • 我被黑心中介騙來泰國(guó)打工本鸣, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留疫衩,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 46,324評(píng)論 2 360
  • 正文 我出身青樓荣德,卻偏偏與公主長(zhǎng)得像闷煤,于是被迫代替她去往敵國(guó)和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子涮瞻,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 43,492評(píng)論 2 348

推薦閱讀更多精彩內(nèi)容