【VR陀螺 編譯】9月25日舉行的OC6大會上,Facebook宣布Oculus Quest將支持基于現(xiàn)有的相機實現(xiàn)手勢識別功能,這一功能將于明年年初開放。
這將使開發(fā)人員可以創(chuàng)建與手進行交互的應(yīng)用程序,而無需使用物理控制器。現(xiàn)有的應(yīng)用程序也可以使用此功能進行更新,由于缺少輸入或觸覺反饋,因此僅適用于某些應(yīng)用程序,例如社交VR等。
Facebook對VR的手勢識別感興趣的第一個跡象是在2014年底揭曉的。該公司收購了由4名資深手勢識別技術(shù)專家組成的初創(chuàng)公司Nimble VR。但是收購之后,Oculus清楚地知道該技術(shù)“甚至可能不會在CV2或CV3中使用”。
這可能是因為Nimble的技術(shù)不僅是軟件,而是專用的深度傳感器。深度傳感器可提供出色的手勢識別功能,例如新型HoloLens 2 AR頭顯所具有的功能。但是高端產(chǎn)品價格昂貴,而低端產(chǎn)品笨重且相對較重,這增加了頭顯的重量。
基于普通的攝像頭提供高質(zhì)量的手勢識別是完全不同的挑戰(zhàn)。但是,如果可以做到的話,它就可以將手勢識別添加到已經(jīng)使用攝像頭進行其他跟蹤的頭顯中,而無需花費額外的硬件成本。
2016年,在Oculus Connect 3大會上,首席科學(xué)家Michael Abrash對2021年的VR做出了一系列預(yù)測。他指出,使用手套上的標記可以完美地進行手指跟蹤(并展示了出來),但還不能直接進行。但是,他預(yù)測到2021年將有可能。
如果這項功能在今年推出,那么Facebook將比Abash的預(yù)測提前一年。
在2018年的Facebook年度F8會議上,該公司終于展示了高質(zhì)量的無手套、無標記手勢識別。
一位Oculus代表在舞臺上解釋說,這一“突破”是由于Facebook在機器學(xué)習(xí)( AI)研究上的大量投資而得以實現(xiàn)的。他們使用Abrash在2016年描述的那種手套系統(tǒng)來訓(xùn)練卷積神經(jīng)網(wǎng)絡(luò)以實現(xiàn)識別手勢功能,這很有可能使該功能成為可能。
人們戴上VR頭顯時,要做的第一件最自然的事就是伸出雙手。手勢識別是最自然的操作,它們也非常適合游戲,但是目前并能追蹤絕大多數(shù)的手勢動作。
在社交VR中,可以用真實的手自由打手勢的能力增加了沉浸感,并增加了社交影響力。比如有用戶在AltSpaceVR等平臺上使用Leap Motion來實現(xiàn)手勢識別進行VR社交體驗。
投稿/爆料:tougao@youxituoluo.com
稿件/商務(wù)合作: 六六(微信 13138755620)
加入行業(yè)交流群:六六(微信 13138755620)
元宇宙數(shù)字產(chǎn)業(yè)服務(wù)平臺
下載「陀螺科技」APP,獲取前沿深度元宇宙訊息