目前還沒有用于在VR中學(xué)習(xí)手語的綜合應(yīng)用程序,但是,伯爾尼應(yīng)用科學(xué)大學(xué)計(jì)算機(jī)科學(xué)系的一名學(xué)生正在使用Oculus Quest的自帶手動(dòng)跟蹤功能,以實(shí)現(xiàn)在虛擬環(huán)境中學(xué)習(xí)手語的這一想法。
瑞士大學(xué)計(jì)算機(jī)感知與虛擬現(xiàn)實(shí)研究小組(cpvrLab)的學(xué)徒塞德里克· 吉拉?。–édricGirardin)創(chuàng)建了一個(gè)初級(jí)的Quest應(yīng)用程序,該應(yīng)用程序可以識(shí)別并教給用戶多達(dá)23種來自德語拼寫字母的手勢(shì)。您可以執(zhí)行的每個(gè)信號(hào)都會(huì)被識(shí)別并以3D顯示;該應(yīng)用程序會(huì)實(shí)時(shí)分析您的手,并驗(yàn)證用戶是否正確執(zhí)行了簽名。
作為Girardin的最后一個(gè)項(xiàng)目,所謂的“手指字母的VR-Trainings應(yīng)用程序”仍然僅限于德語的手指拼寫方法,但是Girardin打算盡快將其開源。Girardin在Reddit帖子中說:“該應(yīng)用程序?qū)⒈4娴氖植磕P团c當(dāng)前手部姿勢(shì)進(jìn)行比較,從而在技術(shù)上可以向應(yīng)用程序中添加任何類型的手勢(shì)并將對(duì)其進(jìn)行驗(yàn)證。”
如果您想自己嘗試一下,實(shí)際上可以免費(fèi)通過SideQuest(一個(gè)非官方的Quest游戲,體驗(yàn)和工具庫)在Quest 上安裝。
VR用戶已經(jīng)使用手語的簡(jiǎn)化版本(特定的手勢(shì)控制指令)進(jìn)行操控已有一段時(shí)間了。但是,聾啞用戶在VR的當(dāng)前狀態(tài)方面遇到了麻煩,例如VR聊天用戶'Quentin'總是會(huì)將“翻譯”和“聽取會(huì)議”這兩個(gè)指令搞混。
在對(duì)2個(gè)女孩,1個(gè)播客的測(cè)試訪談中可以看出,由于VR控制器不允許全手指跟蹤,因此根本不可能進(jìn)行準(zhǔn)確的簽名。Girardin 說:“這套手語方案設(shè)計(jì)使用了一套新的手勢(shì),這讓聾啞用戶目前仍可以在VR中相互交流,但是仍然需要更多的開發(fā),以便用戶可以使用其本機(jī)的,未經(jīng)修改的手勢(shì)語言表達(dá)自己。
由于已經(jīng)存在按語言組劃分的幾種手語類型,并且在某些情況下還需要區(qū)域語言,因此需要一種更準(zhǔn)確的輸入法,這樣就不會(huì)使事情進(jìn)一步復(fù)雜化。
也就是說,像在Quest上看到的那樣,建立在光學(xué)基礎(chǔ)上的手勢(shì)跟蹤并不是一種完美的方法,但它似乎確實(shí)可以解決迄今為止在聾啞玩家VR群體中看到的一些問題,而Quentin和其他一些正在使用的VR Chat簽名者就是其中之一。
來源:roadtovr
投稿/爆料:tougao@youxituoluo.com
稿件/商務(wù)合作: 六六(微信 13138755620)
加入行業(yè)交流群:六六(微信 13138755620)
元宇宙數(shù)字產(chǎn)業(yè)服務(wù)平臺(tái)
下載「陀螺科技」APP,獲取前沿深度元宇宙訊息