編譯/Frida.WS
一直有傳言稱(chēng),蘋(píng)果的VR或AR頭顯將把眼球追蹤功能引入其控制系統(tǒng)。對(duì)此,iPhone制造商提出了一個(gè)設(shè)計(jì)方案,使眼球追蹤系統(tǒng)在運(yùn)動(dòng)狀態(tài)下也盡可能保持精確。
鼠標(biāo)和鍵盤(pán)一直是Mac及其他電腦的主要控制系統(tǒng),而觸摸屏是iPhone或iPad的主要使用方式。雖然近年來(lái),尤其是在移動(dòng)設(shè)備上,語(yǔ)音已經(jīng)成為一種廣泛應(yīng)用的交互方式,但弊端是不夠準(zhǔn)確或靈活,不能適用于所有任務(wù),比如在用戶(hù)選擇的特定顯示點(diǎn)上執(zhí)行操作。
在頭戴顯示器上,VR的控制系統(tǒng)主要是有運(yùn)動(dòng)跟蹤功能的手持控制器??刂破骺梢愿鶕?jù)頭戴顯示器的位置映射軌跡,在應(yīng)用程序中用光標(biāo)或手掌形狀的標(biāo)識(shí)定位。
眼球追蹤是另一種與虛擬現(xiàn)實(shí)環(huán)境進(jìn)行交互的方式,可以檢測(cè)出用戶(hù)顯示屏上的特別關(guān)注。比起用手操作菜單或其他軟件系統(tǒng),這種交互方式更自然、更準(zhǔn)確,也少了些尷尬。
然而,由于用戶(hù)的耳機(jī)一直處于運(yùn)動(dòng)狀態(tài),眼球追蹤的準(zhǔn)確性會(huì)收到干擾。即使固定在頭部,耳機(jī)仍然會(huì)移動(dòng),用戶(hù)的眼睛和眼球跟蹤系統(tǒng)之間的距離一直在變化,效率會(huì)降低。
周二,在美國(guó)專(zhuān)利商標(biāo)局授予蘋(píng)果的一項(xiàng)專(zhuān)利中,就提到了這款可以利用概率和場(chǎng)景檢測(cè)來(lái)解決漂移問(wèn)題的“注視點(diǎn)追蹤系統(tǒng)的電子設(shè)備”。這并不是一個(gè)全新的硬件解決方案,而是有效地建議加入一個(gè)帶有眼球跟蹤系統(tǒng)的軟件,以增強(qiáng)選擇物品的能力。
專(zhuān)利文件概述了具體的工作原理:“電子設(shè)備中的控制電路可以為顯示內(nèi)容產(chǎn)生顯著圖。顯著圖可用于識(shí)別顯示內(nèi)容中的視覺(jué)興趣項(xiàng)。顯著圖可以識(shí)別諸如可選按鈕,文本和其他視覺(jué)興趣項(xiàng)。諸如鼠標(biāo)點(diǎn)擊,語(yǔ)音命令和其他用戶(hù)輸入可以與注視點(diǎn)監(jiān)測(cè)系統(tǒng)的輸出結(jié)合,從而確定用戶(hù)正在查看的對(duì)象。這允許控制電路精確地判斷用戶(hù)在實(shí)際屏幕中的注視點(diǎn)位置。”
演示如何查看顯著圖上的特定顯示點(diǎn)
在正常使用中,當(dāng)用戶(hù)進(jìn)行選擇時(shí),注視點(diǎn)檢測(cè)功能可以確定用戶(hù)正在查看的對(duì)象,并使用顯著圖(Saliency Map),猜測(cè)他們具體在看什么,并使用一個(gè)單獨(dú)的控制器來(lái)確認(rèn)選擇。
除了輔助選擇,顯著圖還可以使眼睛跟蹤系統(tǒng)更準(zhǔn)確。通過(guò)比較用戶(hù)的視線方位、視角、顯著圖上與注視點(diǎn)相關(guān)的興趣區(qū)域,以及語(yǔ)音等其他數(shù)據(jù),系統(tǒng)就可以確定頭顯的移動(dòng)軌跡。
這種移動(dòng)軌跡的檢測(cè)可以實(shí)時(shí)校準(zhǔn)眼球跟蹤系統(tǒng),增強(qiáng)準(zhǔn)確性。
眼睛跟蹤系統(tǒng)校準(zhǔn)流程圖
蘋(píng)果每周都會(huì)向美國(guó)專(zhuān)利商標(biāo)局遞交大量專(zhuān)利申請(qǐng),雖然不能保證這一設(shè)計(jì)理念會(huì)應(yīng)用到未來(lái)的產(chǎn)品服務(wù)中,但它確實(shí)表明了蘋(píng)果研發(fā)工作的興趣領(lǐng)域。蘋(píng)果已經(jīng)研發(fā)AR和VR設(shè)備很多年了,有望在2020年發(fā)布AR智能眼鏡。
蘋(píng)果公司積累了大量相關(guān)技術(shù)專(zhuān)利,甚至嘗試向AR和VR領(lǐng)域推廣產(chǎn)品,比如在macOS上演示VR,以及在iOS上推出AR Kit。蘋(píng)果還在2017年收購(gòu)了德國(guó)一家專(zhuān)業(yè)眼球追蹤技術(shù)的公司SensoMotoric Instruments。
2018年,蘋(píng)果公司申請(qǐng)了一項(xiàng)眼球追蹤系統(tǒng)的專(zhuān)利。系統(tǒng)利用“熱鏡”把紅外光反射到用戶(hù)的眼睛中,需要安裝在離用戶(hù)臉?lè)浅=牡胤剑M可能帶來(lái)舒適體驗(yàn)。2015年,蘋(píng)果一項(xiàng)基于注視點(diǎn)的眼球追蹤專(zhuān)利成功通過(guò),用戶(hù)可以通過(guò)注視屏幕控制iOS或macOS設(shè)備,同時(shí)也緩解了特羅克斯勒效應(yīng)(Troxler Effect),減少對(duì)視覺(jué)互動(dòng)體驗(yàn)的影響。
2019年5月的一份專(zhuān)利申請(qǐng)?jiān)敿?xì)演示了怎樣可以確定用戶(hù)的主導(dǎo)眼球,這一數(shù)據(jù)點(diǎn)通過(guò)分析眼睛定位數(shù)據(jù)的多少,將進(jìn)一步改善眼睛跟蹤系統(tǒng)。
來(lái)源:Appleinsider
投稿/爆料:tougao@youxituoluo.com
稿件/商務(wù)合作: 六六(微信 13138755620)
加入行業(yè)交流群:六六(微信 13138755620)
元宇宙數(shù)字產(chǎn)業(yè)服務(wù)平臺(tái)
下載「陀螺科技」APP,獲取前沿深度元宇宙訊息