文/VR陀螺 靈火
未來,VR頭顯和AR眼鏡將融為一體,并以輕巧、便攜和高效的形態(tài)被人們應(yīng)用在生活中的各處。2021年,VR產(chǎn)業(yè)發(fā)展明顯升溫,但這似乎距離前面描述的目標還有很長的路要走。
就在上周,陀螺君從B站某UP主那學(xué)到了一個實現(xiàn)類似效果的半吊子玩法。其實就是基于Oculus Quest頭顯的邊界系統(tǒng)Guardian功能,在開啟透視的同時顯示VR界面并調(diào)整到合適的透明度玩VR游戲。
Quest開Guardian功能實現(xiàn)偽MR視效(圖源:B站)
這種黑白透視的新奇體驗,令陀螺君不禁聯(lián)想到:如果真有一款結(jié)合了AR眼鏡的增強現(xiàn)實顯示效果和VR頭顯的6DoF強交互玩法的產(chǎn)品,那它的體驗究竟如何呢?
實際上,還真有一款叫“鴻鵠”的MR眼鏡與這一想法不謀而合。恰好,陀螺君也在這周收到了這款產(chǎn)品制造商影創(chuàng)科技寄來的快遞。就這樣,陀螺君抱著上面的疑惑開啟了這次的體驗之旅。
售價2W塊
一款硬實力在線的MR眼鏡
圖源:VR陀螺
鴻鵠,由影創(chuàng)科技和英國PhotonLens聯(lián)合設(shè)計,是首批搭載高通驍龍XR2平臺的混合現(xiàn)實設(shè)備之一,其主體分為主機、可拆卸6DoF體感手柄和MR眼鏡三個部分,眼鏡和主機之間則通過Type-C數(shù)據(jù)線連接。
從外觀來看,“鴻鵠”給人的第一印象更像是一個縮小版的Switch掌機。但所謂麻雀雖小五臟俱全,“鴻鵠” 的一副藍牙手柄采用磁吸式鏈接,可以實現(xiàn)供電、游玩兩不誤。手柄內(nèi)部還內(nèi)置了兩個6DoF“天線”,可供輕度交互時使用。
可拆卸+藍牙手柄+便攜式6DoF演示(圖源:影創(chuàng))
XR2平臺是高通針對XR設(shè)備,新推出的7nm工藝制程擴展現(xiàn)實平臺。其原生支持5G網(wǎng)絡(luò)傳輸,CPU采用8核處理器、最高主頻可達2.84GHz,GPU采用Adreno 650 圖形處理器搭建。據(jù)悉,XR2的CPU和GPU 性能比上一代提升了2 倍、視頻帶寬提升4 倍、分辨率提升6 倍、AI 性能提升了11 倍。
交互方面,XR2定制化的計算機視覺處理器確保交互過程中的精準高效,且可支持最多7路并行攝像頭下高精度實時追蹤用戶頭部、嘴唇和眼球,支持26點手部骨骼追蹤。計算機視覺則可高效進行場景理解和3D重建。
這些所有底層功能,為“鴻鵠”的后期流暢體驗帶來保障。而也的確如上所述,“鴻鵠”這款MR眼鏡獨特的地方,在于將目前流行的VR一體機交互方案無縫移植到了增強現(xiàn)實終端上。
圖源:VR陀螺
其CV方案頭手雙6DoF追蹤功能,基于影創(chuàng)自研的SLAM空間定位算法。
得益于XR2芯片和影創(chuàng)自研算法加持,“鴻鵠”MR眼鏡實現(xiàn)了虛擬物體與真實環(huán)境相對位置的持久化的功能。無論何種意外情況發(fā)生,虛擬物體在真實世界中的位置都是固定不變的。同時,手柄上還集成了隱藏式追蹤燈環(huán),可有效彌補強光環(huán)境下CV方案的短板,實現(xiàn)穩(wěn)定追蹤。
SLAM定位遮擋測試(圖源:影創(chuàng))
就實際體驗感受來說,“鴻鵠”MR眼鏡的追蹤方案與Quest相差無異。據(jù)影創(chuàng)科技透露,攝像機的拍攝速度是60Hz,每幀間隔16.6ms,視頻里每一幀的延遲都低于16.6ms。這種情況下依舊保持較高效的虛實疊加呈現(xiàn),表明整個系統(tǒng)的延遲都在1幀以內(nèi)。
圖源:影創(chuàng)
除了主機和MR眼鏡部分,“鴻鵠”的配件也相當豐富。通過連接在主機背面的圓型磁吸支架,用戶可以隨意加載5G模塊或者外接充電寶供電。“鴻鵠”還配備了一個可拆卸的肩鍵設(shè)計。用戶可以根據(jù)需要選擇是否使用,這在保障完整手柄體驗的同時,實現(xiàn)了便攜。
圖源:影創(chuàng)
此外,“鴻鵠”還配備了全自由度自然手勢追蹤系統(tǒng),這塊在后面的系統(tǒng)實測環(huán)節(jié)中會講到。
系統(tǒng)、操作趨于“科幻”
真實版賽博朋克來了
實際上,這并非是陀螺君第一次體驗“鴻鵠”。
今年一月初體驗時,這款MR眼鏡給我的最大震撼,來源于它將6DoF交互和混合現(xiàn)實相融合的新奇想法。但系統(tǒng)層面,盡管當時是內(nèi)置安卓10以及Blue Cat 2.0雙系統(tǒng),但體驗感受上仍處在初級狀態(tài)。
正所謂一日不見如隔三秋,這次再體驗“鴻鵠”,竟有種時空穿越的感覺。
鏡框兩側(cè)為兩顆CV攝像頭,鏡片外側(cè)為兩顆紅外感應(yīng)器,中心為一顆800萬像素攝像頭(圖源:VR陀螺)
操作系統(tǒng)
MR眼鏡的系統(tǒng)操作體驗,通常由視覺通透性、色彩對比度和交互三方面決定。說到這,相信大部分人都會首先想起于2019年底發(fā)售的,赫赫有名的微軟HoloLens 2。
“鴻鵠”MR眼鏡中,可以看到一些借鑒的影子。首先,該設(shè)備也和HoloLens 2一樣支持全自由度自然手勢追蹤,這意味著用戶只需要正常的通過抓、握、拽等常見動作就可以實現(xiàn)系統(tǒng)交互。
圖源:影創(chuàng)
操作界面的可視化,“鴻鵠”采用了更加靠近安卓電視桌面的排布方式。上手后不會像HoloLens 2那種手腕呼出界面一樣令人感到陌生。幾秒內(nèi),用戶就可以用手拖動界面對應(yīng)的位置滑動圖標并選擇應(yīng)用。
值得一提的是,手勢模型到控制界面之間,有一條“磁力線”作為鏈接。這使得用戶不用像HoloLens 2中一樣非得走到面前去戳對應(yīng)的位置,而是可以與虛擬窗口保持一定距離實現(xiàn)流暢操作。
縮放操作演示(圖源:影創(chuàng))
以頁面窗口為例,用戶可以通過將“磁力線”吸附在邊框上進行翻轉(zhuǎn)。配合比較直觀的過渡動畫效果,可以給人一種自然、高流暢度操控感受。
繪畫應(yīng)用
回到6DoF交互上,基于手柄“鴻鵠”可以準確追蹤用戶手臂更多自由度的活動。為了更好地展現(xiàn)其在MR眼鏡上的表現(xiàn),“鴻鵠”內(nèi)置了一款類似MR版本《Tilt Brush》的繪畫應(yīng)用。
圖源:影創(chuàng)
在實際體驗過程中,懸空的畫板和真實環(huán)境背景形成透視關(guān)系,更像是在現(xiàn)實生活中的一張透明亞克力板。同樣的,作畫過程中筆觸的力道、軌跡都模擬的非常真實。值得一提的是,因為“鴻鵠”使用的是BB光學(xué)方案,其對比度、透光性和色彩控制都要比波導(dǎo)類更好,此外相較VR頭顯又少了分辨率問題的困擾,在這樣的場景下的繪畫體驗十分新奇,可謂是極具科幻感。
圖源:影創(chuàng)
繪畫過程中,手柄與筆觸做到無縫銜接。在這里,可以全面呈現(xiàn)出“鴻鵠”6DoF手柄在無延遲三維空間追蹤效果的出色表現(xiàn)。
在虛擬鴻鵠的創(chuàng)作過程中,手柄與SLAM算法相融合,實時感知現(xiàn)實空間的三維信息,XR2處理器做出機器視覺信息運算,再將虛擬畫面與手柄軌跡一一對應(yīng),這樣的閉環(huán)計算幾乎感知不到延遲,更是靠肉眼無法察覺的。
影音娛樂
6DoF交互+SLAM呈現(xiàn),為一些成熟的游戲作品移植打好了堅實的基礎(chǔ)。比如,在MR環(huán)境中體驗《Beat Saber》,需要的是超低延遲和長時間高頻運動下穩(wěn)定的虛擬環(huán)境定位。可以說,此次體驗里“鴻鵠”都做到了。
此外,“鴻鵠”的安卓10系統(tǒng)自然可以原生支持安卓游戲在其上流暢運行。陀螺君在MR眼鏡上嘗試了王者榮耀和網(wǎng)頁瀏覽。面對全息大屏打游戲、追劇,并且還有種飄浮在半空中若隱若現(xiàn)的感覺,這種游戲體驗像極了各類賽博朋克電影中的經(jīng)典場景。
圖源:影創(chuàng)
最重要的是,相較于僅僅作為外接顯示器的傳統(tǒng)手機+AR分體式眼鏡設(shè)備,“鴻鵠”自帶的手柄可以藍牙適配大部分游戲內(nèi)容,遙感+按鍵操作的舒適度遠超盲搓手機。
“鴻鵠”背后
承載著影創(chuàng)怎樣的大志?
“鴻鵠”的背后,是CV方案6DoF交互、XR2芯片組、手勢識別等技術(shù)趨于成熟的寫照;VR產(chǎn)業(yè)從Cardboard到Quest,AR產(chǎn)業(yè)從15°FOV棱鏡到45°FOV BB光學(xué)......這些底層技術(shù)不再被高高掛起,各大廠商結(jié)合自有特色研發(fā)出新產(chǎn)品,并開啟探索走向商用化和普及化的征程。
Quest VR游戲生態(tài)正在海外市場掀起一場熱潮。 其成熟生態(tài)的背后,離不開技術(shù)硬實力的支撐。而影創(chuàng)作為國內(nèi)MR硬件廠商,憑借自研將6DoF等技術(shù)成功賦能到MR眼鏡上,這證明國內(nèi)內(nèi)容生態(tài)起勢前的技術(shù)儲備階段已經(jīng)頗見成效。
便攜性大幅提升(圖源:影創(chuàng))
至于國內(nèi)MR游戲未來是否會像VR游戲一樣火爆,現(xiàn)階段不好妄下結(jié)論。但是,“鴻鵠”給了國內(nèi)VR、AR游戲開發(fā)者更多可能性,無論是舊游戲移植還是新游戲創(chuàng)作,對于急待發(fā)展優(yōu)質(zhì)內(nèi)容和良性營收閉環(huán)的中國VR/AR游戲生態(tài)來說都是好事。
總結(jié)
上次體驗時,影創(chuàng)工作人員告訴陀螺君,他們正在以一天N次迭代的高強度工作方式來優(yōu)化“鴻鵠”操作系統(tǒng)、可視化界面和人機交互的體驗成熟度。今天,“鴻鵠”算是交上了一份滿意的答卷。
“鴻鵠”MR眼鏡原價是20000元,預(yù)售定金是5000元。目前“鴻鵠”MR眼鏡已經(jīng)開啟預(yù)售通道,影創(chuàng)科技還推出了“趣味問答免尾款”(限量198臺,目前已售罄)、“體驗反饋贏免單”和“2021 Qualcomm XR 創(chuàng)新應(yīng)用挑戰(zhàn)賽贏獎品”活動。
如果參加“體驗反饋贏免單”和“2021 Qualcomm XR 創(chuàng)新應(yīng)用挑戰(zhàn)賽贏獎品”活動,將有機會獲得影創(chuàng)科技免費贈送的“鴻鵠”MR眼鏡。
無論是從技術(shù)、算法層面看,還是創(chuàng)新能力和想象力上看,國內(nèi)以影創(chuàng)為代表的一眾廠商正在MR這條道路上擴寬探索半徑。隨著海外消費級市場的崛起,成熟商業(yè)化技術(shù)模式的形成,國內(nèi)將依托獨有的產(chǎn)業(yè)鏈優(yōu)勢助推國內(nèi)廠商一路向前,以更好的體驗、更加低廉的成本后發(fā)搶占國際市場。
投稿/爆料:tougao@youxituoluo.com
稿件/商務(wù)合作: 六六(微信 13138755620)
加入行業(yè)交流群:六六(微信 13138755620)
版權(quán)申明:本文為VR陀螺原創(chuàng),任何第三方未經(jīng)授權(quán)不得轉(zhuǎn)載。如需轉(zhuǎn)載請聯(lián)系微信:vrtuoluo233 申請授權(quán),并在轉(zhuǎn)載時保留轉(zhuǎn)載來源、作者以及原文鏈接信息,不得擅自更改內(nèi)容,違規(guī)轉(zhuǎn)載法律必究。文中有圖片、視頻素材來自互聯(lián)網(wǎng)或無法核實出處,如涉及版權(quán)問題,請聯(lián)系本網(wǎng)站協(xié)商處理。
元宇宙數(shù)字產(chǎn)業(yè)服務(wù)平臺
下載「陀螺科技」APP,獲取前沿深度元宇宙訊息