文/VR陀螺 萬里

對于Meta乃至整個頭顯市場而言，Quest 2無疑都是一款成功的產(chǎn)品。

目前Quest 2頭顯銷量已經(jīng)突破1000萬臺，此外，Quest 2在SteamVR中的活躍設(shè)備占比達(dá)到了41.95%，遙遙領(lǐng)先于同類型產(chǎn)品。而在生態(tài)方面，Quest Store內(nèi)容數(shù)量已超過500，有40款內(nèi)容總營收超過了1千萬美元。

北京時間9月28日凌晨1點，一年一度的Meta Connect大會即將召開，屆時我們將能看到Quest 2繼任者Quest 3的全部信息。不僅如此，活動可能還會同步亮相新一代Ray-Ban Stories以及Meta所構(gòu)建的MR生態(tài)。本文將對Connect大會進行前瞻，提前揭秘本次活動的相關(guān)看點。

 活動議程 

Connect 2023活動為期兩天，主題為“Expanding reality, today and tomorrow”，翻譯過來則是“擴展現(xiàn)實，現(xiàn)在與未來”。介紹指出，今年活動將重點關(guān)注“人工智能、VR、MR和AR。”

活動采用線上直播的方式，扎克伯格的主題演講可在Meta官方Facebook賬號、Horizon Worlds等平臺觀看，而開發(fā)者會議等則可以通過Facebook賬號@MetaforDevelopers觀看。

目前官方所公布的活動日程如下：

▋基調(diào)演講

• 主講人：Mark Zuckerberg

• 時間：Day 1 10:00 AM（PST）

與創(chuàng)始人兼首席執(zhí)行官馬克·扎克伯格和特邀嘉賓一起揭開全新產(chǎn)品Meta Quest 3的神秘面紗，揭示Meta如何將混合現(xiàn)實帶入生活。您將聽到人工智能將如何幫助人們以全新的方式建立聯(lián)系和表達(dá)自我，并率先了解將幫助開發(fā)人員構(gòu)建人類聯(lián)系未來的最新產(chǎn)品和更新。

▋介紹·Reality Labs最新進展

• 主講人：Michael Abrash （Reality Labs首席科學(xué)家）、Andrew Bosworth（Meta首席技術(shù)官與Reality Labs負(fù)責(zé)人）

• 時間：Day 1 主題演講后

Meta Reality Labs正在發(fā)明基礎(chǔ)技術(shù)來實現(xiàn)未來的計算平臺。在本次對話中，首席科學(xué)家Michael Abrash將分享上下文 AI、神經(jīng)接口和超現(xiàn)實編解碼器Avatar等關(guān)鍵領(lǐng)域的進展。

▋介紹·開發(fā)商聯(lián)盟狀況

• 主講人：Chaya Nayak（生成式人工智能數(shù)據(jù)與安全產(chǎn)品經(jīng)理）、Chris Pruett（Meta內(nèi)容生態(tài)系統(tǒng)總監(jiān)）、Rangaprabhu Parthasarathy（Presence平臺產(chǎn)品總監(jiān)）、Kimberly Unger（Oculus Publishing內(nèi)容采購和MR戰(zhàn)略負(fù)責(zé)人）

• 時間：Day 1 11:45 AM（PST）

聆聽Meta開發(fā)者生態(tài)系統(tǒng)的最新消息，率先了解人工智能、VR、MR、AR、Meta Horizon Worlds和Meta Avatars等領(lǐng)域所有令人興奮的最新工具、程序和功能。

▋短時演講·Meta Quest和MR

• 時間：Day 2 10:00 AM（PST）

親身體驗我們接下來構(gòu)建的混合現(xiàn)實世界。加入 Meta Leadership，了解混合現(xiàn)實和 Meta Quest 3 的所有內(nèi)容，以及推動這一下一代產(chǎn)品的尖端功能和業(yè)務(wù)策略。

本場活動包含“Meta Quest 3：發(fā)揮你的創(chuàng)造潛力”、“釋放混合現(xiàn)實的魔力”和“在 Meta Quest 上構(gòu)建所需了解的一切”三大主題，分別有不同的主講人，內(nèi)容圍繞Quest 3的一些技術(shù)特性、MR開發(fā)平臺Presence Platform、游戲測試、分析工具等。

▋短時演講·AI、Llama 等

• 時間：Day 2 11:15 AM（PST）

與行業(yè)先驅(qū)一起展示 Llama 的最新成果、Meta 的最新人工智能開發(fā)成果以及 Meta Spark 上的新工具。

本場活動包含“Llama生態(tài)系統(tǒng)：過去、現(xiàn)在和未來”、“與Llama一起構(gòu)建Meta的下一代人工智能產(chǎn)品體驗”、“將Llama提升至企業(yè)級”、“移動版Meta Spark的新增功能”四大主題，分別有不同的主講人，內(nèi)容圍繞Meta AI大型語言模型Llama展開。

新品1：Quest 3

毫無疑問，Quest 3將會是本次活動的重點，不過Meta于今年6月已經(jīng)公布產(chǎn)品的部分渲染圖以及參數(shù)信息，并且近期有關(guān)Quest 3的爆料信息不斷，這使得它的神秘感少了許多。以下是部分產(chǎn)品參數(shù)信息：

從上表來看，Quest 3目前仍未能得到證實的參數(shù)包含屏幕分辨率、RAM、FOV、內(nèi)存版本以及發(fā)貨時間等，其他都已經(jīng)板上釘釘。這款產(chǎn)品的亮點包含以下幾方面：

更強的性能

回顧VR一體機的發(fā)展，它基本上與高通驍龍XR平臺的發(fā)展相掛鉤：彼時Quest 2首發(fā)驍龍XR2，在隨后數(shù)年中，高通驍龍XR2成為了各大XR廠商的首選。如今，Quest 3有望首發(fā)高通驍龍XR2 Gen 2，并將在計算性能方面有巨大突破。

根據(jù)Meta官方消息，新一代芯片的圖形性能可達(dá)Quest 2的兩倍以上，更強的性能有利于進一步提升體驗的流暢度并為更多大型、復(fù)雜的游戲應(yīng)用開發(fā)奠定基礎(chǔ)。

此外，有消息傳出驍龍XR2 Gen 2基于驍龍8Gen2開發(fā)而來，后者采用1+2+2+3架構(gòu)，搭載Adreno 740 GPU并支持硬件級別光線追蹤等特性，是目前智能手機市場最高端處理器之一。此外，驍龍8Gen2配備了一顆專門用于AI計算的Hexagon處理器，Quest 3在AI方面可能也會有很多有意思的特性。

圖源：Meta

更好的VST

去年Meta Quest Pro實現(xiàn)了對全彩透視的支持，其方案是基于兩枚灰度攝像頭進行畫面捕捉再結(jié)合一顆1600萬像素RGB攝像頭對畫面進行上色，不過最終呈現(xiàn)效果并不理想，存在著時延、抖動、畫面畸變等相關(guān)問題。

Quest 3則轉(zhuǎn)用雙RGB攝像頭方案并新增了一枚深度攝像頭，根據(jù)近期X用戶@Lunayian的爆料視頻，Quest 3的透視效果色彩還原不錯，白平衡較為準(zhǔn)確，并且令人困擾的畫面畸變問題也減輕了許多。

Meta曾表示Quest 3的VST捕捉像素相較于Quest 2提升了10倍，相較于Quest Pro提升了2.5倍（Reddit用戶JMS1717爆料稱產(chǎn)品的VST捕捉畫面分辨率可達(dá)到18 PPD。）這意味著全彩透視質(zhì)量已經(jīng)十分接近屏幕分辨率。

爆料大戶Mark Gurman今年對Quest 3進行了佩戴體驗，他提到“我甚至可以戴著頭顯使用手機，這在Quest 2上幾乎是不可能的。”不過時延等其他影響VST體驗的參數(shù)表現(xiàn)仍有待揭秘。

更好的交互

交互方面，Quest 3仍以手柄為主導(dǎo)，今年6月Meta公布了產(chǎn)品的手柄Touch Plus，或許出于成本考慮，它并沒有采用Touch Pro的自追蹤方案，定位方式依舊是基于紅外的Outside-In追蹤。Touch Plus在Quest 2手柄的基礎(chǔ)之上去除了圓環(huán)，使得手柄整體更加緊湊。此外，Touch Plus還采用了TruTouch觸覺技術(shù)，具有更好的反饋效果。

除手柄以外，Quest 3的手勢識別也是一大看點。上個月Meta發(fā)布了手勢識別Hands 2.2軟件版本更新，Meta指出在日常使用過程中，手勢識別延遲減少了40%，而在快速移動場景中延遲甚至能減少高達(dá)75%。

快速移動延遲的降低得益于Meta新引入的快速運動模式（FMM），這有利于把手勢識別進一步引入到節(jié)奏游戲、拳擊游戲等更多激烈對抗的游戲場景中。不僅如此，Hands 2.2在Quest Pro設(shè)備上還可以實現(xiàn)裸手+手柄等多模式輸入，這些手勢的更新可能也會在Quest 3設(shè)備中有所體現(xiàn)。

當(dāng)然，Quest 3很大概率會缺失眼動追蹤，這或許會成為Quest 3的最大遺憾。

Quest Pro基于Hands2.2的演示，圖源：Meta

其他產(chǎn)品配件

參考Quest 2，Meta或許會為Quest 3開發(fā)一系列配件產(chǎn)品，其中可能包括綁帶、無線接收器、收納包、面部遮罩、耳機等。以下是近期Quest 3遭到爆料的部分配件：

• Quest 3采用了布質(zhì)綁帶設(shè)計，但綁帶可更換，可以額外選配硬質(zhì)精英頭帶；

• 根據(jù)FCC信息，Quest 3還有一款充電底座，頭顯與底座采用金屬觸點的方式充電，手柄則采用無線充電的方式充電。

圖源：網(wǎng)絡(luò)

新品2：新一代Ray-Ban Stories

根據(jù)今年The Verge泄露的Meta產(chǎn)品路線圖，Meta正著手于4款眼鏡產(chǎn)品的開發(fā)，其中包括第二代Ray-Ban Stories、代號為Orion的第一款A(yù)R眼鏡測試機、第三代Ray-Ban Stories智能眼鏡、代號為Orion的正式版AR眼鏡。其中第二代Ray-Ban Stories很有可能在Connect2023得到展示。

第一代Ray-Ban Stories發(fā)布于2019年，由Meta與雷朋合作打造。該產(chǎn)品配備了雙攝像頭，可實現(xiàn)拍攝、視頻錄制、聽音樂等操作，但不具備AR功能。有數(shù)據(jù)指出，初代Ray-Ban Stories共計銷售了超過30萬臺，但是設(shè)備活躍度一般。

初代Ray-Ban Stories，圖源：Meta

據(jù)有關(guān)消息，新款Ray-Ban Stories同樣不會配備屏幕以及AR功能，但它將會在續(xù)航、音質(zhì)以及拍照表現(xiàn)上有所提升。以下是關(guān)于產(chǎn)品部分新的功能特性：

• 用戶可以通過眼鏡在Facebook和Instagram平臺進行直播；
• 眼鏡支持部分直播平臺的語音留言反饋，方便主播在沒有屏幕顯示的情況下與觀眾進行交流；
• 計劃適配更多流媒體音樂平臺；
• 可檢測環(huán)境噪音并自動調(diào)節(jié)設(shè)備音量；
• 引入AI助手，可通過“Hey Meta”來提問。

其他方面，新一代Ray-Ban Stories已經(jīng)通過FCC認(rèn)證，并支持WiFi 6E及其6 GHz頻段。初代產(chǎn)品售價299美元起步，新眼鏡售價暫未明確。

 更豐富的MR生態(tài) 

隨著VST顯示效果的提升以及深度傳感器的引入，Quest 3將有望帶來遠(yuǎn)超過Meta Quest Pro的MR體驗。實際上，本次Keynote簡介中也重點提到了：“揭示Meta如何將混合現(xiàn)實帶入生活”等相關(guān)信息。

基于年初爆料信息，Meta VR副總裁Mark Rabkin指出，目前團隊面臨的一大挑戰(zhàn)在于如何說服消費者為Quest 3支付更多錢（畢竟Quest 3起售價要比Quest 2多了200美元），而這一突破口正是MR體驗。

Mark Rabkin提到，“MR體驗必須讓用戶感到更好、更輕松、更自然......如你可以毫不費力的穿過你的房子、因為你知道自己看的很清楚，你可以將錨點和其他東西放在桌面上，你可以喝咖啡等，在頭顯里面呆更長時間。”

此外，Meta指出，Quest 3是其首款支持采集場景數(shù)據(jù)、網(wǎng)格數(shù)據(jù)和深度數(shù)據(jù)三種空間數(shù)據(jù)的VR設(shè)備。這使得設(shè)備能夠識別物體和表面、標(biāo)記物體（如桌子、沙發(fā)、窗戶等）以及估計物體的大小、形狀以及彼此之間的距離信息等。

這將意味著Quest 3通過傳感器以及AI算法，將具有更強的環(huán)境感知能力，這就使得我們在游戲時無需再劃分安全邊界、VR游戲體驗可以進一步與現(xiàn)實環(huán)境配合，如將屏幕錨定在桌子上方、射擊游戲碰到墻壁會出現(xiàn)反彈效果、虛實遮擋呈現(xiàn)更加自然等。

基于Quest 3的MR體驗，圖源：網(wǎng)絡(luò)

隨著Connect大會的臨近，最近MR相關(guān)的游戲或者玩法更新不斷出現(xiàn)在我們的視野中，比如VR賽車游戲《Track Craft》，該游戲可以基于現(xiàn)實環(huán)境設(shè)計賽車的跑道，它將于10月在Quest平臺上線；MR辦公應(yīng)用Softspace可讓用戶在現(xiàn)實環(huán)境中生成虛擬工作空間，用戶可在其中記筆記、整理照片以及組織想法等，該應(yīng)用也即將在Quest Store上線。

3D版思維導(dǎo)圖，圖源：Softspace

 第三方與第一方內(nèi)容生態(tài) 

根據(jù)過往慣例，公布Quest Store的發(fā)展情況基本上是Meta Connect的保留節(jié)目。如Connect2020，彼時的Facebook公布了17款游戲；去年Connet大會上，Meta公布了Camouflaj Teams、Armature Studio和Twisted Pixel三家游戲工作室的收購等。

今年3月，Mark Rabkin曾提到，為了配合Quest 3推出，屆時將會有41款新的應(yīng)用和游戲得到亮相。而根據(jù)Quest Store官網(wǎng)，上面“即將上市/接受預(yù)定”的游戲數(shù)量達(dá)到了29款，其中包括了《阿斯加德之怒2》、《刺客信條Nexus VR》等大作，下圖中的部分游戲應(yīng)該會在Connect大會上有所公布。

除了第三方應(yīng)用游戲外，Meta或許還會公布自家VR辦公/VR社交等產(chǎn)品的最新動態(tài)。

《Horizon Worlds》是Meta寄予厚望的一個VR社交平臺，也是其元宇宙愿景中不可或缺的一大板塊，但從目前來看，該平臺的運營表現(xiàn)只能算得上一般。去年10月，有消息透露，該平臺月活不足20萬，并且用戶黏性不佳。如今在Quest Store上，該應(yīng)用的評價與排名也要低于《Rec Room》、《VRChat》等同類型產(chǎn)品。

這一年以來，Meta團隊其實為《Horizon Worlds》下了很大的功夫，如今年6月，平臺新增了紋理和模型導(dǎo)入功能，類似于《VRChat》，這有助于讓玩家構(gòu)建畫面效果更為精細(xì)的場景以及體驗。今年9月，《Horizon Worlds》還新增了Avatar腿部動作的顯示。

不僅如此，Meta還在著手于將《Horizon Worlds》移植到手機、Web等平臺中。而手機以及Web版在9月的時候已經(jīng)展開小規(guī)模對外開放測試。今年Connect大會有望公布其更多動態(tài)，如開發(fā)者計劃、構(gòu)建更加精細(xì)的Avatar等。

圖源：Meta

在去年Meta Connect大會上，扎克伯格花費了很大的篇幅用于介紹MR辦公的場景以及用例，如與埃森哲和微軟達(dá)成合作，微軟的Teams、Office、Windows將有望引入到Quest平臺當(dāng)中。從現(xiàn)在來看，受限于Quest Pro產(chǎn)品力不足，MR辦公想法過于超前等，使得Meta在這一年當(dāng)中并沒有太多進展。

如今Quest 3即將發(fā)布，憑借其更強的性能、更好的VST效果以及更便宜的價格，Meta或許會在MR辦公領(lǐng)域?qū)崿F(xiàn)更大作為，這一切也有待Connect大會公布。

 AI進一步接入頭顯以及眼鏡 

除XR以外，AI也是本次活動一大重要看點，并且次日演講中有一場專門圍繞Meta  AI大型語言模型Llama的演講。AI可能會在整個Connect大會期間都有所體現(xiàn)。

如下圖展示的場景，用戶佩戴Quest 3掃描房間，設(shè)備會正確識別沙發(fā)并出現(xiàn)相應(yīng)標(biāo)記，這離不開AI算法做支撐。值得一提的是Meta曾在今年4月發(fā)布了一個圖像分割基礎(chǔ)模型SAM，它能識別圖片或視頻的不同對象并把它們分割開來。此外，SAM也可以實現(xiàn)在視頻中標(biāo)注物體、追蹤運動物體等，目前其最直接的用例無疑是用于頭顯的環(huán)境感知以及交互。

圖源：Meta

近日《華爾街日報》爆料稱，Meta正著手于打造一款生成式AI聊天機器人，內(nèi)部代號為“Gen AI Personas”。Gen AI Personas既可以與用戶聊天互動，也可以參與一些能夠提升生產(chǎn)力的工作，如幫助編碼等。考慮到語音是第二代Ray-Ban Stories的核心交互之一，不排除Gen AI Personas將會搭載于眼鏡上，并在Connect大會期間公布更多細(xì)節(jié)。

關(guān)于對話式人工智能，高通今年宣布與Meta達(dá)成合作并基于Llama 2構(gòu)建終端側(cè)AI應(yīng)用，未來Llama 2將能在基于高通平臺的智能手機、PC和XR等設(shè)備上運行。終端側(cè)AI的優(yōu)勢在于不需要依賴于云服務(wù)，甚至可以離線運行，更加私密安全。

除頭顯以及眼鏡外，消息指出Meta還在開發(fā)適用于Horizon Worlds Avatar形象的AI模型，如前面提到的Avatar新增“雙腿”，這可能也離不開AI算法的支持。

 結(jié)語 

對于關(guān)注硬件的VR愛好者而言，Connect大會無疑是一場被提前劇透的發(fā)布會。Vision Pro的珠玉在前，使得Quest 3的光環(huán)暗淡了許多。不過對于Meta而言，基于Quest 3所構(gòu)建的MR生態(tài)可能是整場Connect大會更值得關(guān)注的地方。

Quest 3能否延續(xù)前代的成功？Quest 3能否加速MR時代的到來？未來頭顯市場又會形成何種格局？種種問題將有望在Connect大會得到揭曉。