解析HoloLens中用戶本能交互方式

HoloLens操作空間虛擬3D物體交互形式

之前我寫到過有關(guān)于增強(qiáng)現(xiàn)實(shí)場景下用戶交互方式的文章翻擒,這篇文章集中介紹有關(guān)于微軟的MR設(shè)備HoloLens的交互方式元潘。HoloLens通過安裝在設(shè)備上的傳感器和輸入技術(shù),(其中包括聲音輸入摹恨、手勢輸入隧魄、眼動識別)實(shí)現(xiàn)用戶混合現(xiàn)實(shí)場景下的交互行為卓练。HoloLens有三種交互模型,適合多場景下的混合現(xiàn)實(shí)體驗(yàn)堤器。這三種交互模型反應(yīng)了用戶心理模型昆庇。

交互模型包括:手和運(yùn)動控制器、免動手操作闸溃、凝視和提示整吆。簡單舉幾個例子:

【手和運(yùn)動控制器】

適合與3D空間的操作拱撵,用戶可以通過手勢操作選中空間中的虛擬3D物體,通過頭部移動進(jìn)行移動表蝙,利用6Dof追蹤拴测,將物體自由地置于空間中的任何位置。如圖所示府蛇,利用結(jié)合視覺和慣性器件的slam技術(shù)得到高精度的6dof追蹤結(jié)果集索,能夠更好的實(shí)現(xiàn)放置的準(zhǔn)確性。


3DoF與6DoF技術(shù)對比圖

(這在以前AR設(shè)備上汇跨,都是裝很多個魚眼鏡頭來實(shí)現(xiàn)定位务荆,追蹤和防止的,這種既使得AR設(shè)備變得笨重不堪穷遂,且造價昂貴函匕,用戶還不買帳。這里分享一個小小的課外知識:HoloLens利用邊緣計(jì)算來運(yùn)行SLAM技術(shù)蚪黑,這樣可以使得CPU及應(yīng)用系統(tǒng)高效運(yùn)行盅惜。


2016年面世的Meta 2 AR眼鏡

這兩種技術(shù)支持了用戶能夠自如地用雙手將空間中看到的虛擬物體隨意擺放。在交互上來說忌穿,手是人類自嬰兒時期最重要的感覺器官抒寂,當(dāng)嬰兒看到色彩鮮明的物體時,首先會選擇用手去抓取掠剑∏撸可見人在和空間中虛擬物體交互時,最舒適的方式是抓取和擺放澡腾。因此沸伏,手和運(yùn)動控制器適用于用戶在3D空間中與虛擬3D物體交互的絕大部分場景糕珊。

【免動手操作】

適合解放雙手的操作动分,適用于用戶培訓(xùn)、維修及瀏覽等場景红选。用戶無需動手操作澜公,就可以通過眼鏡設(shè)備中的聲音獲取信息。用戶還可以通過長時間注視某按鈕進(jìn)行必要的按鈕觸發(fā)操作喇肋。這樣的確省事不少坟乾。然而用戶在瀏覽的過程中會遇到一種不便的常用操作,即進(jìn)度調(diào)控操作蝶防。在交互上甚侣,用戶就可以通過這樣的規(guī)則長時間聚焦按鈕自動觸發(fā)的方式激活“下一頁”的按鈕觸控,從而實(shí)現(xiàn)上下翻頁间学,當(dāng)然也可以通過語音交互的方式選擇上下步驟跳轉(zhuǎn)殷费。

針對長時間聚焦按鈕實(shí)現(xiàn)點(diǎn)選行為印荔,HoloLens給了這樣的規(guī)則說明:

1.初動延遲 :當(dāng)用戶開始看著目標(biāo)時,系統(tǒng)不應(yīng)立即響應(yīng)详羡,否則可能給用戶帶來不愉快的體驗(yàn)仍律,致用戶精疲力盡。這種情況下实柠,我們會啟動一個計(jì)時器水泉,用于檢測用戶是在有意盯著該目標(biāo),還是僅僅瞟了它一眼窒盐。

2.啟動停留反饋:在確定用戶是在有意盯著該目標(biāo)以后草则,我們開始顯示停留反饋,通知用戶停留激活正在啟動蟹漓。在設(shè)定好臨近度(即用戶在注視而不是瞟著某個大型目標(biāo))的情況下畔师,建議將初動時間設(shè)置為 150-250 毫秒。

3.持續(xù)反饋:當(dāng)用戶持續(xù)看目標(biāo)時牧牢,顯示一個連續(xù)進(jìn)度指示器看锉,用戶就知道自己必須始終看著目標(biāo)。對于眼睛凝視輸入塔鳍,建議一開始顯示一個較大的圓圈或球體伯铣,然后將其縮小,通過這種方式吸引用戶的視覺注意力轮纫。顯示一個表示最終狀態(tài)的指示器(小圓圈)是為了告知用戶停留將何時結(jié)束腔寡。示例圖如下所示。

4.完成:如果用戶一直注視該目標(biāo)(又注視了 650-850 毫秒)掌唾,則完成停留激活放前,選擇被用戶注視的目標(biāo)。

HoloLens聚焦式點(diǎn)選規(guī)則

簡單的翻頁操作可以以這樣的交互方式滿足糯彬,但如果遇到步驟過多凭语,需要選擇某一步驟的情況時,就需要考慮界面中增添喚起步驟選項(xiàng)的菜單撩扒。這些都需要在實(shí)戰(zhàn)應(yīng)用中不斷摸索似扔,尋找更合適的交互邏輯跳轉(zhuǎn)方式。


HoloLens瀏覽器體驗(yàn)場景

凝視和提交】

點(diǎn)擊式體驗(yàn)搓谆。MR場景中大部分需要用到點(diǎn)擊的交互行為炒辉。凡是界面中涉及到按鈕的都需要通過點(diǎn)擊來實(shí)現(xiàn)。而現(xiàn)在的AR設(shè)備/MR設(shè)備有一體式的泉手,有分體式連box主機(jī)的(計(jì)算存儲都在box里)黔寇,也有連接手機(jī)的,甚至還有連接電腦的斩萌。這時候點(diǎn)擊的操作會有很多方式:通過手勢缝裤;通過設(shè)備本身的硬件按鈕操作状囱;通過遙控器;也有通過移動設(shè)備倘是;甚至?xí)型ㄟ^適配的外接設(shè)備例如鼠標(biāo)亭枷,鍵盤等來實(shí)現(xiàn)點(diǎn)擊的操作。

HoloLens點(diǎn)擊手勢交互

以上的交互方式雖然能夠適用于大部分的MR/AR交互的使用場景搀崭,但并未全部涵蓋叨粘,比如利用AR/MR設(shè)備實(shí)現(xiàn)鍵盤打字,現(xiàn)階段還未體驗(yàn)到較流暢的交互方式瘤睹。“為了確保用戶交互體驗(yàn)中不存在差距升敲,最好是從頭到尾遵循單個模型的指南。

每一種交互方式都需要盡可能遵循用戶本能的交互習(xí)慣轰传,并需要根據(jù)不同場景考慮哪種更適合當(dāng)前操作驴党。當(dāng)然,在應(yīng)用構(gòu)建使用場景的環(huán)節(jié)下获茬,就應(yīng)該盡量不要設(shè)定的太復(fù)雜港庄,因?yàn)檫@樣會導(dǎo)致用戶需不斷切換交互方式,用戶很容易在這個過程中產(chǎn)生困惑和不習(xí)慣恕曲。

此外鹏氧,除了人與機(jī)器本身的交互方式,當(dāng)AR或MR設(shè)備配置外部遙控設(shè)備或移動設(shè)備做控制器時佩谣,交互的主動權(quán)問題將會成為交互邏輯中最復(fù)雜的一塊邏輯性問題之一把还,之后也會進(jìn)一步學(xué)習(xí)和分享。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末茸俭,一起剝皮案震驚了整個濱河市吊履,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌调鬓,老刑警劉巖艇炎,帶你破解...
    沈念sama閱讀 216,591評論 6 501
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異袖迎,居然都是意外死亡冕臭,警方通過查閱死者的電腦和手機(jī)腺晾,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,448評論 3 392
  • 文/潘曉璐 我一進(jìn)店門燕锥,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人悯蝉,你說我怎么就攤上這事归形。” “怎么了鼻由?”我有些...
    開封第一講書人閱讀 162,823評論 0 353
  • 文/不壞的土叔 我叫張陵暇榴,是天一觀的道長厚棵。 經(jīng)常有香客問我,道長蔼紧,這世上最難降的妖魔是什么婆硬? 我笑而不...
    開封第一講書人閱讀 58,204評論 1 292
  • 正文 為了忘掉前任,我火速辦了婚禮奸例,結(jié)果婚禮上彬犯,老公的妹妹穿的比我還像新娘。我一直安慰自己查吊,他們只是感情好谐区,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,228評論 6 388
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著逻卖,像睡著了一般宋列。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上评也,一...
    開封第一講書人閱讀 51,190評論 1 299
  • 那天炼杖,我揣著相機(jī)與錄音,去河邊找鬼盗迟。 笑死嘹叫,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的诈乒。 我是一名探鬼主播罩扇,決...
    沈念sama閱讀 40,078評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼怕磨!你這毒婦竟也來了喂饥?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 38,923評論 0 274
  • 序言:老撾萬榮一對情侶失蹤肠鲫,失蹤者是張志新(化名)和其女友劉穎员帮,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體导饲,經(jīng)...
    沈念sama閱讀 45,334評論 1 310
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡捞高,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,550評論 2 333
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了渣锦。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片硝岗。...
    茶點(diǎn)故事閱讀 39,727評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖袋毙,靈堂內(nèi)的尸體忽然破棺而出型檀,到底是詐尸還是另有隱情,我是刑警寧澤听盖,帶...
    沈念sama閱讀 35,428評論 5 343
  • 正文 年R本政府宣布胀溺,位于F島的核電站裂七,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏仓坞。R本人自食惡果不足惜背零,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,022評論 3 326
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望无埃。 院中可真熱鬧捉兴,春花似錦、人聲如沸录语。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,672評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽澎埠。三九已至虽缕,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間蒲稳,已是汗流浹背氮趋。 一陣腳步聲響...
    開封第一講書人閱讀 32,826評論 1 269
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留江耀,地道東北人剩胁。 一個月前我還...
    沈念sama閱讀 47,734評論 2 368
  • 正文 我出身青樓,卻偏偏與公主長得像祥国,于是被迫代替她去往敵國和親昵观。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,619評論 2 354

推薦閱讀更多精彩內(nèi)容

  • 最近,各大科技媒體壁查、網(wǎng)站甚至是股市都在熱議VR(虛擬現(xiàn)實(shí))觉至,稱之為智能手機(jī)之后的又一個顛覆性科技產(chǎn)品,并稱2016...
    薛斯塔閱讀 6,120評論 7 42
  • Introduction 在如今迅速發(fā)展的MR(即混合現(xiàn)實(shí)睡腿,此文中MR包含VR语御、AR兩種技術(shù))領(lǐng)域,人機(jī)交互設(shè)計(jì)正...
    大喵與小喵閱讀 1,116評論 0 1
  • 一席怪、 AR 1应闯、AR 為何物 現(xiàn)實(shí)增強(qiáng)技術(shù)(Augmented Reality),也就是我們常說的AR何恶,是一種實(shí)時...
    凡幾多閱讀 43,028評論 0 23
  • 以前不知道簡書孽锥,至少在兩年前我還不熟悉這個。后來在查資料的時候细层,發(fā)現(xiàn)好多內(nèi)容都來自于簡書這個平臺惜辑,于是前兩天...
    鬧鐘又響了閱讀 174評論 0 0
  • 近日捧搞,一則題為《武宣某中學(xué)一老師集資買車方式簡直是碉堡了抵卫!》的信息在網(wǎng)上瘋傳,廣西武宣縣相關(guān)部門就此事介入調(diào)查胎撇。這...
    山青水秀6閱讀 208評論 0 0