目前還沒有用于在VR中學習手語的綜合應用程序,但是,伯爾尼應用科學大學計算機科學系的一名學生正在使用Oculus Quest的自帶手動跟蹤功能,以實現(xiàn)在虛擬環(huán)境中學習手語的這一想法。
瑞士大學計算機感知與虛擬現(xiàn)實研究小組(cpvrLab)的學徒塞德里克· 吉拉?。–édricGirardin)創(chuàng)建了一個初級的Quest應用程序,該應用程序可以識別并教給用戶多達23種來自德語拼寫字母的手勢。您可以執(zhí)行的每個信號都會被識別并以3D顯示;該應用程序會實時分析您的手,并驗證用戶是否正確執(zhí)行了簽名。
作為Girardin的最后一個項目,所謂的“手指字母的VR-Trainings應用程序”仍然僅限于德語的手指拼寫方法,但是Girardin打算盡快將其開源。Girardin在Reddit帖子中說:“該應用程序?qū)⒈4娴氖植磕P团c當前手部姿勢進行比較,從而在技術上可以向應用程序中添加任何類型的手勢并將對其進行驗證。”
如果您想自己嘗試一下,實際上可以免費通過SideQuest(一個非官方的Quest游戲,體驗和工具庫)在Quest 上安裝。
VR用戶已經(jīng)使用手語的簡化版本(特定的手勢控制指令)進行操控已有一段時間了。但是,聾啞用戶在VR的當前狀態(tài)方面遇到了麻煩,例如VR聊天用戶'Quentin'總是會將“翻譯”和“聽取會議”這兩個指令搞混。
在對2個女孩,1個播客的測試訪談中可以看出,由于VR控制器不允許全手指跟蹤,因此根本不可能進行準確的簽名。Girardin 說:“這套手語方案設計使用了一套新的手勢,這讓聾啞用戶目前仍可以在VR中相互交流,但是仍然需要更多的開發(fā),以便用戶可以使用其本機的,未經(jīng)修改的手勢語言表達自己。
由于已經(jīng)存在按語言組劃分的幾種手語類型,并且在某些情況下還需要區(qū)域語言,因此需要一種更準確的輸入法,這樣就不會使事情進一步復雜化。
也就是說,像在Quest上看到的那樣,建立在光學基礎上的手勢跟蹤并不是一種完美的方法,但它似乎確實可以解決迄今為止在聾啞玩家VR群體中看到的一些問題,而Quentin和其他一些正在使用的VR Chat簽名者就是其中之一。
來源:roadtovr
投稿/爆料:tougao@youxituoluo.com
稿件/商務合作: 六六(微信 13138755620)
加入行業(yè)交流群:六六(微信 13138755620)
元宇宙數(shù)字產(chǎn)業(yè)服務平臺
下載「陀螺科技」APP,獲取前沿深度元宇宙訊息