發(fā)布時間:2019-12-12 13:52 | 標簽:
SteamVR ARCore Oculus Quest OPPO
微信掃一掃:分享
微信里點“發(fā)現(xiàn)”,掃一下
二維碼便可將本文分享至朋友圈
OPPO公布首款A(yù)R眼鏡,采用衍射光波導(dǎo)技術(shù)
在今日舉行的OPPO未來科技大會,OPPO副總裁、研究院院長劉暢在會上展示OPPO AR眼鏡。據(jù)劉暢透露,目前OPPO已成立了6大研究所、4大研究院,在全球的專利申請數(shù)量上已超過4萬件,發(fā)明專利占比88%。
OPPO創(chuàng)始人兼CEO陳明永會上表示,“此刻,我要說,OPPO不僅是一家手機公司。有超過一半與人工智能、5G和智能設(shè)備相關(guān)。可以看到,萬物互聯(lián)就在眼前。”
此次OPPO提出了構(gòu)建互融式技術(shù)體系的技術(shù)創(chuàng)新2.0階段。在5G、AI等前沿技術(shù)基礎(chǔ)上,通過設(shè)備、數(shù)據(jù)、計算、服務(wù)、場景多個維度構(gòu)建用戶價值。并進一步提出了“三圈模型”的IoT戰(zhàn)略,包括個人場景、垂直場景和融合場景。
OPPO個人場景戰(zhàn)略包含手機+手表+耳機,通過手機+手表+耳機的融合,達到用戶的個人智能設(shè)備閉環(huán)。OPPO垂直場景戰(zhàn)略則是5G CPE領(lǐng)域,OPPO對CPE的定位是成為家庭連接中樞,為垂直場景提供集中式通信入網(wǎng),更為未來云端邊緣計算能力提供支持。
該設(shè)備是OPPO推出的首款A(yù)R硬件,據(jù)現(xiàn)場展示該硬件搭載深度傳感器,獲得周圍環(huán)境的3D信息,設(shè)備采用衍射光波導(dǎo)技術(shù) ,利用SLAM算法進行快速掃描和三位重建,再通過高清攝像頭捕獲物理世界的細節(jié)信息,利用算法對光場估算,再將數(shù)字世界和物理世界的坐標對齊。此外,該設(shè)備配置3D環(huán)繞聲、手勢識別、語音識別等多模態(tài)交互。軟件方面,OPPO AR眼鏡也配備各種AR內(nèi)容、游戲以及服務(wù)。
Oculus Quest 手勢追蹤SDK將于下周推出
本周,Oculus Quest推出手部追蹤功能,您可在本周V12更新發(fā)行版的“Experimental Features(實驗功能)”菜單中啟用體驗。該手部追蹤功能使用內(nèi)置攝像頭來識別用戶手指及手部運動,用戶無需學(xué)習控制器就可操作一體式VR頭顯。
這是一種固件更新,不僅沒有添加新硬件,反而減少了硬件數(shù)量。Quest用戶將首次在沒有Oculus Touch控制器的情況下,向朋友和家人演示這款一體式頭顯的一些基本功能。Quest并不是首個支持手部追蹤的頭顯,此前HTC Vive Cosmos VR頭顯也宣布支持光學(xué)手指追蹤功能。不過,手部追蹤對于一體式頭顯要困難許多,而且有報道稱Cosmos手指追蹤效果不佳。
Quest系統(tǒng)程序首發(fā),本周只有一些系統(tǒng)應(yīng)用程序可以支持手部追蹤功能,其他游戲體驗還需要等待一段時間。
-
Oculus主菜單,包括Store和Library
-
Oculus瀏覽器(內(nèi)置網(wǎng)頁瀏覽器)
-
Oculus TV(適用于2D內(nèi)容和360視頻)
這意味著您可以直接把Quest當作沉浸式媒體播放器或便攜式影院,無需Touch控制器。不過UploadVR尚不清楚Facebook何時會推出入門級體驗Elixir,之前曾用于向媒體展示手部追蹤功能。
下周,F(xiàn)acebook計劃發(fā)布用于手部追蹤的軟件開發(fā)工具包(SDK),此后所有Quest開發(fā)者都可以在應(yīng)用程序或游戲中使用這項功能。Oculus Avatar計劃于2020年支持手指追蹤,將允許開發(fā)者在默認情況下添加與用戶實際膚色匹配的手部皮膚。
UploadVR表示還不清楚會有哪些開發(fā)者支持手部追蹤技術(shù),但大多數(shù)社交和媒體應(yīng)用應(yīng)該都會支持。UploadVR正在整理一份支持手部追蹤功能的Quest應(yīng)用程序清單,所以如果您是VR開發(fā)者,請發(fā)郵件至tips@uploadvr.com。Bigscreen首席執(zhí)行官已經(jīng)表示加入,并且UploadVR已經(jīng)證實Guy Godin的Virtual Desktop將會使用此功能。
Facebook預(yù)計第三方應(yīng)用將于2020年首次開始支持這項功能。但該功能僅限制某些支持手部追蹤的游戲 內(nèi)容,其他更多游戲仍然需要按鈕、模擬搖桿、觸發(fā)器或觸覺反饋。此外,追蹤質(zhì)量可能達不到高級雙手交互體驗的要求。
研發(fā)時間長 難度大
2014年底,F(xiàn)acebook首次表達了對VR手指追蹤技術(shù)的興趣。此后,公司收購了Nimble VR初創(chuàng)公司,并將其四名手控跟蹤技術(shù)的資深研究員納入麾下。收購時,Oculus非常清楚這項技術(shù)“甚至可能不會用于CV2或CV3”。
或許是因為Nimble技術(shù)需要一個專用的深度傳感器。深度傳感器能夠提供良好的手指追蹤效果,與現(xiàn)在的HoloLens 2 AR新頭顯類似。然而,專用傳感器會增加頭顯的成本和重量,很可能不會被廣泛采用。按照Quest的思路,在普通相機上挑戰(zhàn)高質(zhì)量的手指追蹤效果,難度很大。Quest采用了與其他追蹤技術(shù)相同的硬件,這一點可能會成為Facebook的競爭優(yōu)勢,也可能廣泛用于Facebook的未來產(chǎn)品中。
在2016年Oculus Connect 3大會上,首席科學(xué)家Michael Abrash曾對2021年的VR發(fā)展做出一系列預(yù)測。他指出在手套上添加標記可以完美實現(xiàn)手指跟蹤(并展示了出來),但當時還不能直接投入使用,預(yù)計2021年或許可以實現(xiàn):
Facebook現(xiàn)在就推出這一功能,比Abash的預(yù)測早了一年。2018年,F(xiàn)acebook在年度F8大會上展示了高質(zhì)量的無手套、無標記手指追蹤技術(shù)。Oculus的一名代表在臺上解釋說,這一“突破”之所以成為可能,是因為Facebook在機器學(xué)習(“AI”)研究方面投入了大量資金。他們使用了2016年Abrash描述的手套系統(tǒng)來訓(xùn)練卷積神經(jīng)網(wǎng)絡(luò),用以識別手部姿勢。
進步潛力
“當我握拳或者手移動得太快時,手就會消失。如果我轉(zhuǎn)頭又回看手部動作時,會有一秒的延遲時間。當用指尖指向虛擬對象時,他們之間仍然有一些小間隙,然后才能迅速調(diào)整到合適位置。我認為所有這些都是追蹤技術(shù)需要努力的方向。”
除非Facebook在過去的三個月里做出了巨大改進,否則您可能無法體驗到與Touch控制器相同的追蹤效果。(控制器包含一個加速度計和一組紅外發(fā)光二極管,專門用于一定范圍內(nèi)的追蹤定位。)
不過,對于社交VR、媒體及休閑類游戲來說,手指及手部追蹤功能還是足夠的。Facebook計劃“在2020年添加新功能和功能,以改善Quest頭顯的手部追蹤體驗。”
與Touch控制器的發(fā)展軌跡相同,今后,F(xiàn)acebook可能會繼續(xù)提高手指追蹤的質(zhì)量和穩(wěn)定性。
在Oculus Connect 6大會上,工程經(jīng)理Robert Wang解釋說,目前迭代“只觸及了手部追蹤功能的皮毛”。雖然Robert很謹慎地沒有透露發(fā)展計劃,但也確實表示Facebook將“樂于”實現(xiàn)常規(guī)攝像頭下的雙手追蹤交互體驗。
程序員開發(fā)特斯拉新車AR試駕應(yīng)用
當你最喜歡的新車還有兩年才能夠正式上路,你會怎么辦?當然是,嘗試一下AR。
幾周前,在埃隆·馬斯克(Elon Musk)的特斯拉Cybertruck曝光后,一個應(yīng)用程序開發(fā)人員就做了這樣的事情。現(xiàn)在,任何想近距離親自了解Cybertruck的人都可以用這個非官方、不屬于特斯拉的應(yīng)用程序AR Cybertruck親身體驗Musk的車。
這個程序能夠在iOS和Android設(shè)備上使用,操作也十分簡單:你會得到一個按車子實際尺寸縮放的AR Tesla Cybertruck模型,從而你就能夠觀察它在你生活中是否真的合適。
以一個嘗試了這個app的YouTuber為例,他發(fā)現(xiàn)Cybertruck實在太大了,無法放進他的車庫。
除了使用該應(yīng)用程序測試這輛車在你生活中是否合適(或者不合適)之外,它還可以用于查看這部車在現(xiàn)實世界中的汽車和卡車旁邊的樣子。
你不僅能夠查看車輛的大小,這個app還能讓你進行一些其他操作,包括打開創(chuàng)新的后燈和前燈,打開和關(guān)閉座艙(在真實的車上,這比一塊太陽能電池板大兩倍)。
在你撥弄完那些鈴鐺和鳴笛之后,你也可以把這輛車從標準的不銹鋼外觀改成一個磨砂黑色外觀版本,這是Musk確認過將在2022年末隨車發(fā)售提供的一種選裝外表。
而且,如果你家即使是在AR中都無法容納這輛大型卡車,這個app也帶有一個便捷的“迷你版”Cybertruck,你可以把它放置在你的桌面來查看它。
如果這還不夠,這個app甚至有一個控件能讓你在現(xiàn)實世界中駕駛Cybertruck的AR版本。
程序開發(fā)者向用戶收取2美元的費用,對于這樣一個簡陋的程序來說有點不合理。但是由于眾多的用戶(最新統(tǒng)計為25萬人)花費100美元來預(yù)訂這輛車,所以這里依然有相當一群特斯拉粉絲在尋找這樣的應(yīng)用程序。
就在這個周末,Musk開著這輛車在公眾場合兜風,但是我們當中不太可能有人能從這個古怪的企業(yè)家那里得到一個Cybertruck相似的替代品,所以在真正的產(chǎn)品準備完前,這個新的應(yīng)用可能是接下來最好的選擇。
SteamVR更新,Valve Index可實時切換刷新率
在NVIDIA GPU的支持下,SteamVR最新測試版現(xiàn)可直接改變Valve Index頭顯的刷新率,無需重啟SteamVR軟件。
Index是Valve公司首個基于PC的VR系統(tǒng)。雖然整套設(shè)備售價999美元,是Facebook Oculus Rift價格的兩倍多,但也為用戶帶來市場上最高逼真度的VR體驗。
Index頭顯的吸睛賣點是其144hz刷新率,比市面上所有VR頭顯都要高,可以更加真實地呈現(xiàn)VR世界中的移動物體。
如果您的電腦不能保持144hz刷新率,Index允許用戶選擇80hz, 90hz和120hz的刷新率。只不過每次變動刷新率時,用戶必須重啟SteamVR,比較費時。值得慶幸的是,現(xiàn)在只要您有一個最新驅(qū)動的NVIDIA卡,就可以實時切換刷新率,省去很多麻煩。
這需要一個更加簡潔的新的用戶設(shè)置界面。用戶界面所含的元素更多,更符合最近重新設(shè)計的Steam游戲庫。
當然,這仍然意味著您需要根據(jù)不同游戲手動切換至合適的刷新率。就像分辨率一樣,如果系統(tǒng)能夠保存每個游戲相應(yīng)的刷新率,那就太好了。這意味著您可以為Beat Saber手動設(shè)置成144Hz,而打開《No Man’s Sky》時系統(tǒng)又自動切換至80Hz。
SteamVR Beta版已經(jīng)更新這項功能,但請注意在使用Beta版前,您一定要先了解具體步驟。如果您發(fā)現(xiàn)您的Index頭顯運行出現(xiàn)問題,我們建議您直接退出,等待Valve公司發(fā)行穩(wěn)定版。
谷歌推出ARCore Depth API
谷歌的開發(fā)者平臺ARCore推出一款稱為Depth API的新工具,該工具可以讓開發(fā)者使用谷歌的動態(tài)深度算法和一個RGB攝像頭來制作深度地圖,還可以使AR游戲體驗更加自然,在現(xiàn)實世界中更真實地顯示虛擬圖像。
谷歌的研究和工程主任Shahram Izadi在一篇博客文章中說,Depth API工具現(xiàn)在可以為移動AR應(yīng)用提供遮擋,創(chuàng)建更真實的物理和表面交互。
谷歌播放了許多演示視頻來展示Depth API工具為ARCore帶來的全部功能。
“ARCore的Depth API允許開發(fā)者借助我們的深度移動算法,使用RGB攝像頭來創(chuàng)建深度地圖,”Izadi說,“深度地圖是通過比較不同角度拍攝的多幅圖像,從而估算出每個像素的距離。”
AR頭顯通常使用多個深度傳感器來創(chuàng)建深度地圖,而谷歌稱Depth API只需要一個傳感器。紅色表示距離較近的區(qū)域,藍色表示距離較遠的區(qū)域:
“Depth一個重要應(yīng)用是遮擋:數(shù)字對象可以精確出現(xiàn)在真實世界對象前面或后面的能力,”Izadi解釋說,“遮擋把數(shù)字對象與環(huán)境混合在一起,打造更真實的沉浸感。我們開始在Scene Viewer中加入對實時遮擋的支持,也將支持谷歌AR搜索功能,目前已經(jīng)有超過2億的Android設(shè)備支持ARCore。”
此外,Izadi表示,Depth API不需要專門的攝像頭和傳感器,未來與手機的ToF攝像頭結(jié)合后,ARCore的深度映射功能可以優(yōu)化實時動態(tài)遮擋的效果。
Depth API是在谷歌于5月份發(fā)布“環(huán)境HDR”工具之后推出的,為AR對象和環(huán)境帶來了更真實的光影效果,旨在通過更真實的反射、陰影和照明來增強沉浸感。
The Information報告:Magic Leap One銷量低迷,ML2“遙遙無期”
日前,The Information的一份報告稱,Magic Leap One在上半年僅售出6000臺,因為其技術(shù)問題,真正的后續(xù)產(chǎn)品仍“需要數(shù)年時間”。
ML1是一款真正的AR頭顯,可能是同類產(chǎn)品中第一個被廣泛使用的產(chǎn)品,它的目標用戶不僅僅是企業(yè),還包括消費者。頭顯支持多種內(nèi)容,包括社交應(yīng)用Avatar Chat、一個可以在房間任何地方投射的網(wǎng)絡(luò)瀏覽器、一個用于查看家具如何使用的Wayfair應(yīng)用程序、各種娛樂體驗,以及兩款來自Insomniac Games的游戲。最近公司甚至還為該系統(tǒng)發(fā)布了一款Spotify應(yīng)用。
ML1自2018年8月開始發(fā)貨,定價為2295美元,包含一個6自由度的控制器,同時也支持手動跟蹤。
理想很豐滿,現(xiàn)實很骨感
報告稱,Magic Leap創(chuàng)始人兼首席執(zhí)行官Rony Abovitz告訴投資者和員工,他預(yù)計Magic Leap One第一年的銷量將“至少”達到100萬臺。
在描述“空間計算”時,Abovitz表達非常浮夸,并且在去年接受UploadVR采訪時,他認為公司有一天會上市。據(jù)報道,公司高管們最終說服Abovitz,將第一年的目標定為10萬臺。
然而,根據(jù)The Information的調(diào)查報告,Magic Leap One頭顯在前六個月實際只賣出了6000臺——Magic Leap并沒有公開反駁這一消息。在產(chǎn)品發(fā)布時,公司總部的屏幕顯示的是預(yù)期的銷售額,而不是實際的銷售數(shù)據(jù)。
據(jù)報道,由于公司的頭顯庫存非常多,甚至已經(jīng)開始免費發(fā)放給員工。
2018年,Magic Leap每月?lián)p失數(shù)千萬美元。同年,該公司在一場美國陸軍合同競標中輸給了微軟,錯失了一筆利潤豐厚的訂單。今年,公司解雇了“數(shù)十名”員工,并放緩了招聘周期。
為何銷量如此慘淡?
那么,為什么Magic Leap只完成了10萬目標的一小部分呢?
2300美元的定價太高,難以吸引消費者。在VR市場中,F(xiàn)acebook上的Oculus Quest單機售價僅為400美元,并且代表們表示正在盡可能快地推銷產(chǎn)品。
AR所需的定制顯示屏制造困難,這可能導(dǎo)致Magic Leap的成本較高,但我們認為更多是因為公司選擇了高價位的原材料,比如公司還使用了市場上最強大、最昂貴的移動芯片: NVIDIA Tegra X2。相比之下,Oculus Quest使用了高通的一款更便宜的芯片,以吸引更多用戶體驗移動VR。
Magic Leap One的6自由度控制器也采用了電磁追蹤定位。電磁的優(yōu)點是不受遮擋,但比Facebook和微軟的LED跟蹤解決方案要昂貴得多。
但即便Magic Leap One的定價更具競爭力,相對較小的視野范圍和內(nèi)容可能仍會限制它的吸引力。AR眼鏡的終極目標是一款全天候戶外可穿戴設(shè)備,它可以創(chuàng)建任意屏幕,提供步行導(dǎo)航,還可以翻譯語言。Magic Leap目前還無法做到這一點。
Magic Leap 2:遙遙無期
報告還指出,該公司目前正處于Magic Leap One的后續(xù)產(chǎn)品ML2的原型階段。
據(jù)說ML2有更廣闊的視野,更強的“深度感知”(可能有更多的焦平面或變焦系統(tǒng)),以及更高質(zhì)量的圖形。據(jù)報道,設(shè)備也將更小更輕,并有多種顏色。ML2也可以支持5G連接,這似乎表明可以在室外使用——目前的ML1設(shè)備只推薦在室內(nèi)使用。
報告稱,“項目內(nèi)部的一位人士”告訴員工,由于“基礎(chǔ)技術(shù)限制”,ML2設(shè)備仍需數(shù)年時間才能推出。這可能會讓Magic Leap公司與蘋果和Facebook產(chǎn)生直接競爭。據(jù)報道,這兩家公司都計劃在幾年后推出自己的AR眼鏡。
綜上所述,Magic Leap公司似乎即將對Magic Leap進行一次小更新,可能會帶來一些改進。
第一時間了解XR資訊
關(guān)注VR陀螺官網(wǎng)(vrtuoluo.cn)
投稿/爆料:tougao@youxituoluo.com
稿件/商務(wù)合作: 六六(微信 13138755620)
加入行業(yè)交流群:六六(微信 13138755620)