係統粉 > IT資訊 > 微軟資訊

網易嚴選首款AR眼鏡, 成本200元的HoloKit能否對標微軟HoloLens?

發布時間:2017-07-18    瀏覽數:

網易嚴選首款AR眼鏡, 成本200元的HoloKit能否對標微軟HoloLens?(1)

一個成本200來塊的盒子,對標2萬多的微軟HoloLens。這事兒聽上去靠譜嗎?

如果你知道AR(增強現實)眼鏡是個啥,就應該了解在目前的市麵上,體驗最棒、技術最強的就是微軟公司的HoloLens。錯過了移動互聯網大潮的微軟,為了趕上混合現實(Mixed Reality)的下一波,不惜投入重金砸出來了這麼一款黑科技滿滿的眼鏡。

網易嚴選首款AR眼鏡, 成本200元的HoloKit能否對標微軟HoloLens?(2)

“把一塊虛擬圖像自然地貼合到人的視野裏,就像真實物體一樣”,這麼簡單的一句話,基本就是所有增強現實/混合現實體驗的基礎了——實際上,AR眼鏡的問題簡單來說,就是一個“定位”和“顯示”的問題,前者讓虛擬物體能固定在原地不會亂飄,後者讓虛擬物體看上去色澤飽滿不會顯得假。

然而,說起來容易,要實現這一切太困難了。微軟甚至為了處理所有從攝像機和傳感器序列傳來的數據,專門給HoloLens打造了一塊HPU芯片。定位技術SLAM方麵,搭載了四台攝像頭加一台深度攝像頭的HoloLens效果非常穩定,絕對吊打目前市麵上的一切設備;遑論屌爆的光波導顯示方案和3D音頻係統……當然,它的價格也是非常感人,大陸官網上價格分別為商用版39188元和23488元。

不過,就在蘋果推出ARKit前後的六月初,一個ID為“Amber Hu”(真名胡伯濤)的家夥在知乎上貼出了自己的HoloKit方案,號稱用30美元成本的紙盒子打造“比HoloLens效果還好的混合現實眼鏡”,在業內引發了不小的轟動,不少AR圈公司的高管紛紛在朋友圈轉發此文章,也有直接發給筆者本人的。自然而然,也引發了一些質疑。

網易嚴選首款AR眼鏡, 成本200元的HoloKit能否對標微軟HoloLens?(3)

但是,緊接著蘋果的ARKit很快熱潮起來,國內媒體鋪天蓋地的報道、培訓機構聞風而動的跟進,各種ARKit相關demo如雨後春筍一般誕生,HoloKit的聲音也自然而然地被淹沒下去了。

沒想到的是,7月15日網易又突然宣布,網易嚴選會代理HoloKit這款產品。網易相關人士告訴青亭網,這款產品將於大約年底登陸網易嚴選,到時候產品的各方麵都將得到升級。胡伯濤也告訴青亭網,HoloKit這個項目目前已經和他基本上沒什麼關係了,“網易願意商業化,就授權給他們了”。

那麼,HoloKit這玩意到底怎麼樣呢?一個成本200來塊的盒子,對標2萬多的微軟HoloLens。這事兒聽上去靠譜嗎?

和HoloLens比,到底怎麼樣?

網易嚴選首款AR眼鏡, 成本200元的HoloKit能否對標微軟HoloLens?(4)

按胡伯濤在知乎上放出的對比表來說,從FOV上,HoloKit號稱和微軟HoloLens相比具備較強優勢、清晰度也比較高。當然Magic Leap除了某幾個記者見過以外,“還是傳說”,並且效果很可能還沒HoloLens好,就不說它了。

但不管PR上怎麼說,首先,我們可以先把結論放在這裏——“比HoloLens效果還好”肯定無從談起,“效果”是個多元化的東西,是包括定位、顯示、交互等多方麵的綜合產物。像國內外某些公司那樣某幾個參數比HoloLens高就堂而皇之地出來吹了,在PPT上無敵於天下,是很不好的毛病。

還是我之前那句話,微軟傾世界最頂尖的人才,苦心經營了N多年,隨隨便便就被你創業公司超越了?就像一位業內說的,“那會是這個行業的恥辱”。

從實際產品可以看出,這玩意和一體式設備HoloLens、要連電腦的Meta 2都不太一樣,是需要插手機的設備。因此可以理解成,這是一款AR手機盒子。如果你不知道這是何物,可以把他認為是類似穀歌之前出的紙盒子Cardboard和國內一大堆VR公司做的產品,如小米VR玩具版等。

網易嚴選首款AR眼鏡, 成本200元的HoloKit能否對標微軟HoloLens?(5)

其實,AR盒子也不新鮮:國內還有一家名叫RealMax的公司在做類似產品、以及光場視覺的AR BOX,但這些在顯示和定位效果方麵都不能讓人滿意。Meta前員工出來做的DreamWorld顯示倒是還行,不過定位方案還沒發出來。國外還出來過一個眾籌的Aryzon,雖然收了不少錢,但現在效果還不知道怎麼樣。

青亭網以前曾經揭秘過AR手機盒子的現狀和國內很多產品粗製濫造的情況(走了VR又來了AR手機盒子,是真需求還是騙錢貨?)。從筆者與業內人士交流的反饋來看,大多數人似乎對於AR盒子並不看好。

一位業內人士告訴青亭網,他看過國內兩家AR公司的手機盒子方案,“效果都相當一般”,不過“也猶豫了很久,曾經想過自己做一款。畢竟便宜。”當時筆者最擔心的是,這種較為廉價的AR體驗,會不會讓用戶產生AR也“不過如此”的印象,從而傷害整個產業的長遠發展呢?說白了,還是“顯示”和“定位”兩個核心問題解決的太糟糕。

那麼,這兩個核心問題,HoloKit解決得如何呢?接下來讓我們拋開成見,從技術方麵來分析一下這款產品。

網易嚴選首款AR眼鏡, 成本200元的HoloKit能否對標微軟HoloLens?(6)

AR手機盒子就要不得嗎?

實際上,如果能解決好定位和顯示的問題,則手機上的AR並非不可行。

君不見蘋果也在6月初發了一個ARKit?其實ARKit用的就是iPhone手機/iPad上的RGB攝像頭,但“定位”這件事兒它做得相當出色——在蘋果實際演示中,虛擬物體非常牢固地待在桌麵上,不會像某些國產的AR SDK那樣,飄來飄去。

先說顯示,HoloKit的光學方案實際上非常簡單,把iPhone屏幕上的畫麵通過一個鏡子,再通過一個半反半透鏡反射到眼睛裏,就是一個鏡麵反射,類似潛望鏡一樣,其實光學方案和Meta差不多。國內不少的AR眼鏡也是這麼玩的,具體可以看青亭網之前的文章《特稿 | 你不知道的CES真相:AR眼鏡,想說愛你不容易》。

網易嚴選首款AR眼鏡, 成本200元的HoloKit能否對標微軟HoloLens?(7)

從體驗來看,HoloKit的清晰度和FOV都比較大——這的確比起HoloLens那34度的視場角要大,當然這也不能苛責HoloLens,他們光學方案天生就決定了FOV不能這麼大,色差也的確會出現一定問題。

但半反半透這種光學方案的問題在於,真的太大、太原始、太笨重了,無論是90度FOV的Meta、100度的DreamWorld和各種手機盒子,都離我們想象中的“普通眼鏡”形態的AR眼鏡相去甚遠。因此,未來的光學方案絕不會是這種形式的。

再說定位方案,HoloKit的定位方案雖然還是有點略飄,但整體還算比較穩,效果可稱不錯。不過無論是蘋果ARKit還是HoloKit,都並非真正的SLAM。從蘋果放出的文檔來看,其很大可能性是VIO(視覺慣性裏程計Visual–Inertial Odometry)。

VIO是用單目或雙目攝像頭做識別匹配和深度估計等,用慣性測量單元去做初始水平麵估計和3自由度,最後再用一套算法做擬合,當然,這套算法本身的難度是非常高的。

VIO勉強可以理解成是一種模擬,而非真正地像HoloLens那樣對周圍環境進行識別和重建完成SLAM,在這方麵HoloLens是無敵的,但拿手機和它比是不公平的——

SLAM對於手機的資源來說是巨大的消耗,基本不太可能在手機端實現。因此也就可以理解,為何目前HoloKit是實現不了遮擋的(即把手伸到虛擬物體上是沒法把它擋住的),臣妾實在是做不到啊。

網易嚴選首款AR眼鏡, 成本200元的HoloKit能否對標微軟HoloLens?(8)

胡伯濤本人也很大方地承認了這並非SLAM而是VIO。他的算法實際上也並非自己的,而是參考香港科技大學內部的論文,HoloKit是基於後者開源的定位項目VINS開發。他本人則是負責把這套本身用於無人機的算法做到了手機上。他對青亭網指出,整個算法延時大概30毫秒。

不過,雖然定位和顯示方案都受到一定限製,但AR手機盒子也並非那麼不堪。在眼下AR眼鏡還無法普及的情況下,手機無疑是讓大眾能夠接觸到AR最直觀的設備。

我們可以想象一下,AR手機盒子和手機上的AR相比,區別隻是一個需要你舉著手機看屏幕,另一個把手機放到頭上,通過反射到你眼睛裏看手機上的內容罷了。也就是說手機在這裏代替了傳統AR眼鏡的微顯示端。因此,如果產品不是太重、顯示效果OK、虛擬物體定位得很穩,“AR手機盒子”完全可以作為真正的AR眼鏡出現前的一種過渡方案。

筆者願意相信胡伯濤所謂“希望更多的開發者接觸到混合現實,啟迪更多的人來創造混合現實未來”的初衷——這種廉價方案對於教育早期市場的確有積極意義。隻要前提不是說“用30美元成本的紙盒子打造比HoloLens效果還好的混合現實眼鏡”就完美了。

能不能做到安卓上?

網易嚴選首款AR眼鏡, 成本200元的HoloKit能否對標微軟HoloLens?(9)

那麼,和蘋果的ARKit相比,HoloKit的算法如何?這方麵胡伯濤也比較坦誠,他稱ARKit的幀率要比HoloKit要強“一倍”,因此開發者可以選擇自己喜歡的方案。胡伯濤一開始就把HoloKit開源了,開發者可以根據源碼,自己進行二次開發。

隻是,HoloKit其最核心的技術實際上就是它的定位方案。如果離了這套算法,照我們上文的介紹,實際上本身硬件方麵並無稀奇。

胡伯濤告訴青亭網,目前HoloKit還是隻支持 iPhone 7 Plus和iPhone 6s Plus,並不支持一般的安卓機型。在實際開發中,他發現蘋果手機的一致性非常好,調好一台設備基本就差不多了。而安卓的設備多種多樣、眼花繚亂,每台手機的IMU和相機的參數都不一樣,非常難標定,甚至同一款手機的批次不同,參數也不同。

網易嚴選首款AR眼鏡, 成本200元的HoloKit能否對標微軟HoloLens?(10)

現在雖然穀歌自己有一套基於TOF的AR平台Tango,但是由於必須具備TOF模組,支持的手機非常有限,目前隻有兩台。在蘋果本身ARKit來勢洶洶的情況下,如果能把HoloKit的算法移植到一般的安卓平台,讓非Tango的安卓手機也能使用,顯然能夠產生更大的潛力和更多的想象空間。

不過,這一要求對胡伯濤團隊或許“要求過高”了。

目前,胡伯濤團隊隻有他一個人算是全職,另有一名叫朱鳳元(音)的斯坦福同學算是兼職,“我們隻有一個半人,實在沒有精力做下去了。我們就把東西開源,把後續的工作留給開發者吧”。

HoloKit在現場采用了一套國外較為有名的單目手勢識別SDK Manomotion,還有聽說是從“淘寶上花10塊錢”買來的手柄,展示了未來交互方式的可能。而國內進入AR領域較長時間的觸景無限在網易發布會現場宣布,將會給HoloKit提供手勢識別SDK,交互AR遊戲體驗等。也許隨著更多開發者和公司的進入,在未來還會有更多的交互可能性供選擇。

網易嚴選首款AR眼鏡, 成本200元的HoloKit能否對標微軟HoloLens?(11)

網易的AR/VR布局?

網易人士透露:“Holokit是首個讓行業、開發者、用戶低成本、低門檻進入混合現實中的一個好工具。開發者首次擁有低成本驗證創意、快速試錯的可能性;用戶首次低成本便捷得購買及體驗沉浸式感知。而且經過HoloKit積累的經驗與產品,可以延展到將來更多更豐富的沉浸式體驗去。”

此前,網易的手遊《陰陽師》就曾經推出過一種AR玩法,雖然隻是較為簡單的圖像識別召喚遊戲內的“式神”。而騰訊、支付寶等大公司也在積極布局AR方麵的遊戲,如阿裏就曾經推出過AR躲貓貓,QQ也出過AR火炬之類的營銷計劃。因此有業內人士猜測,網易手握遊戲IP,通過HoloKit可以布局其未來AR遊戲的商業化。

據說,網易內部對於VR/AR領域一直較為重視,戰略是丁磊親自定的,他也多次在公司內部會議強調其重要性。資本領域,網易走的是高端化路線,曾經投資過VR直播巨頭NextVR和觸感技術公司AxonVR,還投過一家叫UploadVR的媒體等。

去年8月份,網易CEO丁磊在參加某活動的時候,曾經公開表示,公司內部VR/AR的遊戲都已經有了。

網易嚴選首款AR眼鏡, 成本200元的HoloKit能否對標微軟HoloLens?(12)

網易在看到HoloKit的項目後就覺得挺感興趣,希望能把這款產品引進國內來,而本來就開源的胡伯濤對此也樂見其成。網易稱,這個項目的目的是幫助教育早期的AR市場,“其實沒指著它掙錢”。

至於胡伯濤,他現在已經把這款項目拋諸腦後了,下一個項目,他希望能基於HoloKit的技術搞一款博物館的AR項目。“我們是新媒體藝術工作室,對自己的定位是藝術家,做作品的,不會停留在一個項目上。”

其實,國內有人已經拿了HoloKit的方案出去融資,甚至號稱融到了幾百萬元。不過,對此胡伯濤隻是一笑了之:

“也行吧,我其實對這個感覺還好吧,反正我就是玩。別人業化要基於開源協議的,非要違反協議我們也管不著,可能網易可以管吧。”

上一篇:還不會安裝Windows10?這裏有你想要的 下一篇:微軟將推 Windows 10 版 LinkedIn 應用,不支持 Windows Phone 手機

相關資訊

最新熱門應用

電腦問答