魔法帶進(jìn)現(xiàn)實(shí)饶碘?虛擬現(xiàn)實(shí)公司Magic Leap背后的魔法與陰謀

「硬報(bào)紙」原創(chuàng)文章些举,轉(zhuǎn)載合作請聯(lián)系作者

今年10月,硅谷AR(增強(qiáng)現(xiàn)實(shí))公司Magic Leap發(fā)布了一系列“魔法帶回現(xiàn)實(shí)”的概念視頻:籃球場上鯨魚一躍而起寺晌、外星人突襲辦公室打真人CS……雖然大部分視頻并非實(shí)拍demo世吨,而是特技duang duang的概念片,在各大微信號的無腦營銷下呻征,仍然短短幾天就刷爆朋友圈耘婚。然而,很少有人真正看明白陆赋,Magic Leap究竟是如何實(shí)現(xiàn)這些“魔法”的沐祷。


虛擬現(xiàn)實(shí)的技術(shù)原理


拋開那些大腦植入芯片、黑客帝國style的科幻技術(shù)不談攒岛,當(dāng)前成熟的虛擬 / 增強(qiáng)現(xiàn)實(shí)技術(shù)原理分為兩類:

1赖临、 把光線射進(jìn)你的視網(wǎng)膜

讓你在看到真實(shí)世界的同時(shí),也看到虛擬世界的幻影灾锯。Google眼鏡兢榨、微軟Hololens都是這種原理∷骋或者像Oculus一樣吵聪,干脆用個(gè)頭盔把眼睛遮住,讓你看不見真實(shí)世界兼雄,只能沉浸在虛擬現(xiàn)實(shí)之中吟逝。不過,就算騙過眼睛赦肋,身體還是只能感受到真實(shí)世界而非虛擬世界中的加速度變化澎办,這一點(diǎn)Oculus之流也無能為力嘲碱。

2、 還原真實(shí)物體發(fā)出的光線

讓你無法區(qū)分看到的究竟是真實(shí)還是幻象局蚀。例如1956年發(fā)明的全息攝影(Holography)麦锯。然而,為什么60年后我們還在用iPhone指指戳戳琅绅,而不是用iHolo隔空取物呢扶欣?因?yàn)槟壳俺墒斓娜⒓夹g(shù)只能做到把3D影像投射到一個(gè)玻璃盒子里(通常是金字塔形或立方體),設(shè)備的大小必須大于影像的大小千扶,色彩也不夠逼真料祠。這就是為什么至今全息還停留在珠寶展示和博物館科普的層次上——有幾個(gè)宅男買得起金字塔,放家里看黑白版全息女神愛情動(dòng)作片澎羞?

Magic Leap屬于以上哪一種技術(shù)原理呢髓绽?

都不是。

Magic Leap的核心原理是四維光場


光場(Lightfield)的學(xué)術(shù)概念早在1939年就已提出妆绞,用于描述空間中任意點(diǎn)在任意時(shí)間的光線強(qiáng)度顺呕、方向、波長括饶。當(dāng)鯨魚在我面前游過的一瞬間株茶,它皮膚上每一個(gè)細(xì)胞向四面八方發(fā)出的光,疊加起來形成了一個(gè)光場图焰。理論上启盛,只要完整記錄下一條鯨魚的光場,技術(shù)上就可以完全還原這條鯨魚發(fā)出的所有光線技羔。

假如有這樣一個(gè)神奇的設(shè)備僵闯,它不僅可以記錄光場,還能像投影儀一樣藤滥,把光場信息還原成原始光線發(fā)射出來棍厂,那么當(dāng)你的視網(wǎng)膜接收到這些光線時(shí),就會(huì)認(rèn)為看見了一條真正的鯨魚超陆。 把這個(gè)設(shè)備放在籃球場上牺弹,讓它360度無死角全向發(fā)光,在籃球場上任何角度任何位置的人都會(huì)發(fā)現(xiàn)那里多了一條鯨魚时呀。甚至你近看遠(yuǎn)看张漂,繞一圈看,也不會(huì)察覺到鯨魚的肉身并不存在谨娜。因?yàn)楹皆埽翱匆姟币粭l鮮嫩多汁的鯨魚和看見這條鯨魚發(fā)出的每一束光線,在光學(xué)上沒有任何區(qū)別趴梢。這就是Magic Leap的物理原理漠畜。

為什么叫四維光場币他?

這里的四維是數(shù)學(xué)概念,和平行宇宙憔狞、高維空間沒有半毛錢關(guān)系蝴悉。描述一個(gè)光場需要7個(gè)維度:3個(gè)三維坐標(biāo)表示空間中點(diǎn)的位置,2個(gè)極坐標(biāo)表示這個(gè)點(diǎn)上通過的光的方向瘾敢,1個(gè)波長表示光的顏色拍冠,還有1個(gè)是時(shí)間t。

其實(shí)簇抵,如果只考慮光場被投射到二維平面(例如視網(wǎng)膜)上的話庆杜,關(guān)鍵的維度只有4個(gè):2個(gè)是平面上點(diǎn)的坐標(biāo),2個(gè)是入射光的方向碟摆。

怎樣把鯨魚裝進(jìn)口袋


從基礎(chǔ)理論到做出產(chǎn)品晃财,差距就是突破技術(shù)難點(diǎn):怎樣采集和還原光場?最經(jīng)(yuan)典(shi)的方法是用相機(jī)陣列典蜕,通過在不同距離上鏡頭變焦断盛,由近及遠(yuǎn)地把空間中每一束光線拍下來。比如下圖的斯坦福相機(jī)陣列(Stanford Multi-Camera Array):

到了2011年嘉裤,Lytro光場相機(jī)推出郑临,把上面這個(gè)大家伙變成了手持式栖博,雖然清晰度接近馬賽克畫風(fēng):

Lytro已經(jīng)把實(shí)驗(yàn)室里的龐然大物裝進(jìn)了口袋屑宠,而Magic Leap用了更聰明的方法,短短幾年就把光場投影儀做成了高清無碼可穿戴的AR設(shè)備仇让。

怎么做到的典奉?

輸入實(shí)時(shí)生成,輸出光纖投射


Magic Leap的辦法分為兩步:

1丧叽、不采集真實(shí)影像作為輸入卫玖,而是用計(jì)算機(jī)實(shí)時(shí)生成視頻。

模擬生成的視頻踊淳,可以直接用在增強(qiáng)現(xiàn)實(shí)領(lǐng)域假瞬,例如懸浮在半空中的操作系統(tǒng)UI、辦公室里玩外星人槍戰(zhàn)迂尝。如此一來就解決了片源問題脱茉,不需要等到好萊塢拍出光場版星球大戰(zhàn)8,才能看上光場電影/電視垄开。

2琴许、不用傳統(tǒng)的顯示屏輸出,而是用光纖投射光場溉躲。

Magic Leap 擁有叫做“光纖投影儀”的專利技術(shù)榜田,通過一根直徑 1 毫米長 9 毫米的光纖投出幾英寸彩色圖像益兄,已經(jīng)可以做到4K超高清分辨率。

既然一根光纖可以發(fā)射一束光線箭券,如果要把鯨魚身上每一束光線都投射出來净捅,就需要N個(gè)光纖組成一個(gè)光場投影儀:光纖陣列

最妙的是邦鲫,因?yàn)槊恳桓饫w只有頭發(fā)絲粗細(xì)灸叼,一個(gè)用光纖陣列制造的高清投影儀不僅可以輕松裝進(jìn)口袋,還可以戴在腦袋上庆捺!

既能AR眼鏡古今,也可裸眼3D


說完了物理原理和技術(shù)實(shí)現(xiàn),再談一個(gè)消費(fèi)者最關(guān)心的問題:Magic Leap到底比Google Glass滔以、Hololens捉腥、Oculus、3D電視……好在哪里你画?

1抵碟、可大可小

Magic Leap的光場原理,決定了它既可以做成增強(qiáng)現(xiàn)實(shí)(AR)眼鏡在辦公室打真人CS坏匪,也可以做成全息投影儀放在籃球場讓學(xué)生圍成一圈看裸眼3D拟逮。既然“看見”的本質(zhì)就是把一條鯨魚的所有光線投射到你的視網(wǎng)膜上,那么無論是在你的智能眼鏡上用光纖投射這些光适滓,還是在3米外用光場電視投射敦迄,甚至在30米外用大型光場投影儀,都沒有本質(zhì)區(qū)別凭迹。

光場竟然可以融合視網(wǎng)膜和全息兩大類虛擬現(xiàn)實(shí)技術(shù)罚屋,細(xì)思恐極!

2、不會(huì)暈

無論是看3D電影還是頭戴Oculus嗅绸,雖然把不同光線分別投射到左右眼模擬出3D景深脾猛,卻丟失了光線的方向信息。而4D光場記錄了每一束光線的所有信息鱼鸠,包括位置和方向猛拴,使得看光場和看實(shí)物根本無法區(qū)分。

例如蚀狰,看光場時(shí)愉昆,人眼向遠(yuǎn)處和近處看會(huì)自然對焦,看到的物體有虛實(shí)變化造锅。但傳統(tǒng)的雙目虛擬顯示技術(shù)(如Oculus Rift或Hololens) 中的物體是沒有虛實(shí)的撼唾,使得大腦對于物體遠(yuǎn)近判斷混亂,時(shí)間一長就暈。

換句話說倒谷,如果你看真實(shí)世界不會(huì)暈蛛蒙,看Magic Leap就不可能暈。

3渤愁、不怕強(qiáng)光

AR(增強(qiáng)現(xiàn)實(shí))的老大難問題是:只能在真實(shí)世界的光影上疊加虛擬圖像牵祟,在外界強(qiáng)光干擾下,虛擬世界就會(huì)暗淡無光抖格。這就是為什么在Hololens等各式AR眼睛宣傳視頻中诺苹,片中人物“恰好”都是在昏暗場景中使用AR。

必須遮住現(xiàn)實(shí)中實(shí)物的光雹拄,在用虛擬3D圖像替代它收奔,才是不怕強(qiáng)光的完美AR。要做到替換實(shí)物滓玖,不僅要可以顯示虛擬的光坪哄,還能顯示“沒有光”,比方說能在強(qiáng)光下顯示一個(gè)純黑的球势篡。

例如翩肌,用一杯虛擬咖啡替換桌上真實(shí)的咖啡,首先要把來自真實(shí)杯子的光刪除或屏蔽禁悠,然后再產(chǎn)生一組光讓它們看起來是從杯子的位置發(fā)射出來的念祭。否則,不論是用多么明亮的3D 增強(qiáng)實(shí)景顯示技術(shù)碍侦,只看見一杯半透明的虛擬咖啡尷尬地覆蓋在真實(shí)咖啡上粱坤。

Magic Leap能做到替換實(shí)物影像嗎?從Magic Leap擁有的另一項(xiàng)專利來看祝钢,貌似真的可以:

Bibliographic data: WO2013077895 (A1) ― 2013-05-30

THREE DIMENSIONAL VIRTUAL AND AUGMENTED REALITY DISPLAY SYSTEM

A system may comprise a selectively transparent projection device for projecting an image toward an eye of a viewer from a projection device position in space relative to the eye of the viewer, the projection device being capable of assuming a substantially transparent state when no image is projected; an occlusion mask device coupled to the projection device and configured to selectively block light traveling toward the eye from one or more positions opposite of the projection device from the eye of the viewer in an occluding pattern correlated with the image projected by the projection device; and a zone plate diffraction patterning device interposed between the eye of the viewer and the projection device and configured to cause light from the projection device to pass through a diffraction pattern having a selectable geometry as it travels to the eye.

Magic Leap背后的戰(zhàn)略布局


Magic Leap是個(gè)神秘兮兮的公司比规。都融了5億美元的B輪了若厚,CEO從不露臉拦英,產(chǎn)品長什么樣沒人見過,讓中國人民對著幾個(gè)加特技的宣傳片羨慕嫉妒恨测秸。不過疤估,從他們的公司行為來分析,還是能看出大部分端倪霎冯。

1铃拇、Magic Leap的第一個(gè)產(chǎn)品將是頭戴式眼鏡

前面說過,光場投影的原理沈撞,使得AR眼鏡和裸眼3D產(chǎn)品都可以做慷荔。為什么說Magic Leap一定會(huì)先做可穿戴?

技術(shù)上看缠俺,Magic Leap公司成立時(shí)显晶,創(chuàng)始人Abovitz做光纖機(jī)器人醫(yī)療起家贷岸,又報(bào)了好幾個(gè)光纖方面的專利,做穿戴之心路人皆知磷雇。而用于放裸眼3D的大型光場投影儀偿警,很可能技術(shù)和成本控制尚未成熟。

商業(yè)上看唯笙,有了谷歌眼鏡和微軟全息當(dāng)先烈教育市場螟蒸,消費(fèi)者對于AR的接受程度已經(jīng)不斷提高,而大型光場投影儀一般人可消費(fèi)不起崩掘,也不夠?qū)嵱谩?/p>

2七嫌、Magic Leap 會(huì)發(fā)力跟蹤 / 識(shí)別和體感控制

如果Magic Leap真的做成了可大可小、不會(huì)暈苞慢、不怕強(qiáng)光的AR抄瑟,將會(huì)是世界上體驗(yàn)最好的AR,沒有之一枉疼。一旦把用戶的眼睛變成入口皮假,接下來可以玩的就多了去了。例如:

手勢識(shí)別:AR沒有屏幕可以戳戳戳骂维,手勢是最主流的交互UI惹资,甚至還可以加入腦波控制;

物體追蹤:感知真實(shí)世界中人和物的精確位置航闺,才能讓你在一邊走動(dòng)的同時(shí)褪测,把你眼中的一杯虛擬咖啡一動(dòng)不動(dòng)地安在真實(shí)的飯桌上;

三維掃描:將現(xiàn)實(shí)中的一杯咖啡拍成光場潦刃,分享給別的用戶侮措,他的眼前就會(huì)出現(xiàn)和你手中完全相同的一杯咖啡;

人臉/人體識(shí)別:識(shí)別現(xiàn)實(shí)場景中的人乖杠,可以在每個(gè)人頭上顯示名字分扎、電話和顏值;

情感識(shí)別:既然都能夠識(shí)別人臉了胧洒,不如順便識(shí)別下表情吧畏吓!是哭還是笑,眼鏡全知道卫漫。

3菲饼、買不到現(xiàn)成芯片,Magic Leap 要自己動(dòng)手

除了實(shí)時(shí)計(jì)算四維光場列赎、投射高清視頻外宏悦,實(shí)現(xiàn)以上所說的各種黑科技,還要考慮電池續(xù)航能力、用戶腦袋是否會(huì)過熱饼煞,這么強(qiáng)大的芯片地球上并不存在辫塌。不過B輪融資后,有了高通當(dāng)股東撐腰派哲,給了Magic Leap足夠的膽量自己發(fā)明輪子臼氨。

Magic Leap在去年搬入南佛羅里達(dá)州一個(gè)廢棄的摩托羅拉生產(chǎn)區(qū),計(jì)劃建造2.8萬平方米的工廠芭届,用來生產(chǎn)光子光場芯片(Photonic Lightfield Chip)储矩。

4、Magic Leap充其量是臺(tái)前卒子褂乍,Google才是幕后大BOSS

Google投了5億美元持隧,讓Magic Leap不用顧忌市場和資本,在全封閉狀態(tài)下專心做底層技術(shù)逃片;帶來高通作為戰(zhàn)略投資者屡拨,協(xié)助自主研發(fā)芯片;還讓二號人物褥实、核心產(chǎn)品負(fù)責(zé)人Sundar Pichai 加盟董事會(huì)呀狼;毫無疑問,將來Magic Leap產(chǎn)品開賣损离,搖旗吶喊的也一定是Google哥艇。

給錢、給人僻澎、給技術(shù)貌踏、給市場,Google憑什么無緣無故把一個(gè)初創(chuàng)公司當(dāng)親兒子窟勃?做砸了Glass還要投Magic Leap祖乳,Google為什么偏偏對AR不死心?如果你相信純粹是為了賺錢秉氧,就太小看Google的智商了眷昆。

從前Google的搜索引擎,教會(huì)了人工智能聽說讀寫(自然語言識(shí)別)谬运;而AR將成為人工智能的眼睛和耳朵隙赁,教會(huì)它用人類的視角觀察物理世界垦藏。當(dāng)AI超越人腦的技術(shù)奇點(diǎn)不期而至?xí)r梆暖,人工智能只需要硬件組成的手腳和身體,就能改變世界/取代人類了掂骏。

誰擁有最強(qiáng)的人工智能轰驳,誰就將統(tǒng)治地球——這就是Google從未掩飾的野心。


本文首發(fā)「硬報(bào)紙」:智能硬件前沿資訊级解,技術(shù)流無軟文冒黑,搞硬件的才能看懂哦~

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市勤哗,隨后出現(xiàn)的幾起案子抡爹,更是在濱河造成了極大的恐慌,老刑警劉巖芒划,帶你破解...
    沈念sama閱讀 216,544評論 6 501
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件冬竟,死亡現(xiàn)場離奇詭異,居然都是意外死亡民逼,警方通過查閱死者的電腦和手機(jī)泵殴,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,430評論 3 392
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來拼苍,“玉大人笑诅,你說我怎么就攤上這事〈辏” “怎么了吆你?”我有些...
    開封第一講書人閱讀 162,764評論 0 353
  • 文/不壞的土叔 我叫張陵,是天一觀的道長俊犯。 經(jīng)常有香客問我早处,道長,這世上最難降的妖魔是什么瘫析? 我笑而不...
    開封第一講書人閱讀 58,193評論 1 292
  • 正文 為了忘掉前任砌梆,我火速辦了婚禮,結(jié)果婚禮上贬循,老公的妹妹穿的比我還像新娘咸包。我一直安慰自己,他們只是感情好杖虾,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,216評論 6 388
  • 文/花漫 我一把揭開白布烂瘫。 她就那樣靜靜地躺著,像睡著了一般奇适。 火紅的嫁衣襯著肌膚如雪坟比。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,182評論 1 299
  • 那天嚷往,我揣著相機(jī)與錄音葛账,去河邊找鬼。 笑死皮仁,一個(gè)胖子當(dāng)著我的面吹牛籍琳,可吹牛的內(nèi)容都是我干的菲宴。 我是一名探鬼主播,決...
    沈念sama閱讀 40,063評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼趋急,長吁一口氣:“原來是場噩夢啊……” “哼喝峦!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起呜达,我...
    開封第一講書人閱讀 38,917評論 0 274
  • 序言:老撾萬榮一對情侶失蹤谣蠢,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后查近,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體漩怎,經(jīng)...
    沈念sama閱讀 45,329評論 1 310
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,543評論 2 332
  • 正文 我和宋清朗相戀三年嗦嗡,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了勋锤。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 39,722評論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡侥祭,死狀恐怖叁执,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情矮冬,我是刑警寧澤谈宛,帶...
    沈念sama閱讀 35,425評論 5 343
  • 正文 年R本政府宣布,位于F島的核電站胎署,受9級特大地震影響吆录,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜琼牧,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,019評論 3 326
  • 文/蒙蒙 一恢筝、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧巨坊,春花似錦撬槽、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,671評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至占调,卻和暖如春暂题,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背究珊。 一陣腳步聲響...
    開封第一講書人閱讀 32,825評論 1 269
  • 我被黑心中介騙來泰國打工薪者, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人苦银。 一個(gè)月前我還...
    沈念sama閱讀 47,729評論 2 368
  • 正文 我出身青樓啸胧,卻偏偏與公主長得像赶站,于是被迫代替她去往敵國和親幔虏。 傳聞我的和親對象是個(gè)殘疾皇子纺念,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,614評論 2 353

推薦閱讀更多精彩內(nèi)容