最近Magic Leap和HoloLens很火。它們是什么？為什么這么火？什么時(shí)候能做成？還面臨哪些挑戰(zhàn)？Botao同學(xué)在知乎上談了不少3D感知部分，我來補(bǔ)充補(bǔ)充別的。

　 注：本文僅代表個(gè)人觀點(diǎn)，和我的公司無關(guān)。文章內(nèi)容都是基于公開信息。

   Magic Leap 和 HoloLens 是什么？

　　Magic Leap 和 HoloLens 都是 Augmented Reality （AR）眼鏡的代表。

　　AR 和 VR 眼鏡的區(qū)別是什么？

　　AR 眼鏡是透明的，讓你能同時(shí)看到現(xiàn)實(shí)世界，和疊加在上面的虛擬成像。應(yīng)用例子：趕不上 Lady Gaga 的演唱會(huì)？沒關(guān)系，戴上眼鏡她就在你家里開一個(gè)。代表產(chǎn)品原型：Magic Leap 和微軟的 HoloLens。

　　VR 眼鏡是不透明的，只顯示虛擬世界，把物理世界完全擋住。應(yīng)用例子：坐在家里也能去大溪地“潛水”。代表產(chǎn)品：三星的 Gear VR，谷歌 Cardboard，Oculus Rift。

　　Magic Leap 和 Microsoft 為什么要做 AR 眼鏡？

　　總的來說，這是計(jì)算機(jī)的必然發(fā)展趨勢(shì)。2007 年蘋果推出 iPhone 以來，手機(jī)發(fā)展太迅猛，用戶隨時(shí)隨地帶著它，各項(xiàng)使用數(shù)據(jù)毫無懸念地都在超越 PC 端。所以，人機(jī)交互界面的未來主要在于移動(dòng)。但現(xiàn)在的手機(jī)局限在于：

　　（1）既然要便于攜帶屏幕就做得小，屏幕小了某些功能就得受限；

　　（2）顯示屏幕是平面也就是二維的，而真實(shí)世界是三維的。

　　未來的 AR 眼鏡有望實(shí)現(xiàn)大突破，就是既能讓用戶隨身攜帶，又能在他眼前顯示超大屏幕，還能把以假亂真的 3D 內(nèi)容渲染到他看到的真實(shí)世界里（想象你坐在教室里聽課，你的老師看起來真實(shí)無比，但其實(shí)就是在你的眼鏡上虛擬出來的）。這樣的眼鏡大概不會(huì)完全取代手機(jī)，但毫無疑問潛力無窮。

　　跟 VR 比較，AR 的應(yīng)用場(chǎng)景也更廣闊（你總不能帶著 VR 頭盔大街上走吧）。本質(zhì)上，AR 是 VR 的超集，鏡片前面一擋就成了 VR（前提是視角能做到差不多大）。

　　戴眼鏡好麻煩，為什么不直接像《星球大戰(zhàn)》一樣在空氣中顯示全息圖（Hologram）？

　　Holography 是人類的美好愿景，有一天也許能做成，但近期看離實(shí)用還早。現(xiàn)在有一些大學(xué)實(shí)驗(yàn)室在研究裸眼光場(chǎng)顯示器（light field display），但需要很復(fù)雜笨重昂貴的設(shè)備，還只能在安裝了的地方用。相對(duì)而言，眼鏡的可行性要大得多。如果能做成輕便的 AR 眼鏡，將是移動(dòng)人機(jī)交互界面上也是計(jì)算機(jī)發(fā)展的重大革新。

　　在 VR 頭盔上加個(gè)前視攝像頭不也就成 AR 了嗎？為什么非要透明的？

　　好問題。說起來 AR 有兩種，一種是前面所說的透明 AR（optical see-through）——現(xiàn)實(shí)世界是透過鏡片直接看到的。另一種就是“視頻疊加”（video see-through 或者 video overlay）——現(xiàn)實(shí)世界是通過攝像頭捕捉，然后以視頻的方式呈現(xiàn)給用戶（在上面再渲染一些東西）。事實(shí)上，現(xiàn)在手機(jī)和平板上已經(jīng)出現(xiàn)了很多 video overlay 的應(yīng)用，比如看星空，求翻譯，選家具等。

　　那為什么不用 VR 頭盔加攝像頭實(shí)現(xiàn)這種 AR 呢？當(dāng)然可以，現(xiàn)在很多 VR 頭盔都在試探這種做法。它和透明 AR 相比各有優(yōu)劣，比如優(yōu)勢(shì)在于用視頻實(shí)現(xiàn)的虛擬和現(xiàn)實(shí)的疊加（overlay）要比透明 AR 簡(jiǎn)單得多，這也是為什么它已經(jīng)開始在移動(dòng)端商用的原因。

　　但劣勢(shì)也可想而知，用戶看到的畢竟只是一個(gè) 2D 視頻，質(zhì)量跟眼睛直接看到的世界還是差很大的。而且視頻從采集到顯示總歸是有延遲的，如果跟體感信號(hào)不一致的話會(huì)造成身體不適。所以不管怎樣都還是會(huì)有公司前仆后繼地去做透明 AR 的，Magic Leap 和 Microsoft HoloLens 就是例子。

　　Magic Leap 為什么那么牛能融到 5.42 億？（最近的 C 輪在融 8億）

　　前面說的應(yīng)用潛力無窮肯定是助力，同時(shí)還有技術(shù)，創(chuàng)始人，團(tuán)隊(duì)的原因。

　　Magic Leap 的核心技術(shù)是來自華盛頓大學(xué)前研究員 Brian Schowengerdt 的，他導(dǎo)師 Eric Seibel 是光纖掃描內(nèi)窺鏡（Scanning Fiber Endoscope）的專家。大家都知道內(nèi)窺鏡就是醫(yī)生們做手術(shù)時(shí)用來體內(nèi)成像的，本質(zhì)是個(gè)微小攝像頭。Brian 很聰明地逆轉(zhuǎn)光路把這個(gè)技術(shù)用到了顯示上，這樣通過極細(xì)的光纖用激光就可以打出彩色的圖像（如圖所示）。這個(gè)技術(shù)十幾年前就發(fā)表了，后來又不斷改進(jìn)，生成了一堆專利。Magic Leap 很大程度上是基于 Brian 的這些專利。

　　那這種技術(shù)為什么重要呢？我們后面留成一個(gè)專門的問題講。