編譯/VR陀螺

蘋果Vision Pro允許用戶通過(guò)簡(jiǎn)單的手勢(shì)控制 visionOS 或與之互動(dòng)。然而，有時(shí)可能需要額外的“控制器”來(lái)控制 Apple TV 內(nèi)容、電子游戲、演示或處理文檔圖表，為此可以使用手指設(shè)備來(lái)操作數(shù)據(jù)。今天，美國(guó)專利商標(biāo)局公布了蘋果公司的一項(xiàng)專利申請(qǐng)，涉及在Vision Pro工作區(qū)的虛擬觸控板上使用手指設(shè)備。

蘋果公司的發(fā)明涉及一種方法，包括通過(guò)肢體追蹤器獲取肢體追蹤數(shù)據(jù)。該方法包括在顯示器上顯示計(jì)算機(jī)生成的與物理表面空間關(guān)聯(lián)的觸控板虛擬表示。

在Vision Pro的顯示屏上，可以看到物理表面以及與計(jì)算機(jī)生成的觸控板表示相分離的內(nèi)容操作區(qū)域。該方法包括根據(jù)肢體追蹤數(shù)據(jù)識(shí)別計(jì)算機(jī)生成的觸控板表示中的第一位置。

該方法包括將第一位置映射到內(nèi)容操作區(qū)域內(nèi)的相應(yīng)位置，以及包括在顯示器上顯示指示映射的指示器。指示器可與內(nèi)容操作區(qū)域內(nèi)的相應(yīng)位置重疊。

電子設(shè)備顯示指示映射的指示器。例如，根據(jù)手指操作數(shù)據(jù)，電子設(shè)備確定手指可穿戴設(shè)備正懸停在計(jì)算機(jī)生成的觸控板表示的中心或與之接觸。因此，電子設(shè)備會(huì)在內(nèi)容操作區(qū)域的中心顯示一個(gè)指示器。通過(guò)顯示映射指示，電子設(shè)備向用戶提供反饋，說(shuō)明在某些實(shí)施方案中手指可穿戴設(shè)備與內(nèi)容操作區(qū)域接觸的情況。反饋減少了電子設(shè)備從手指可穿戴設(shè)備接收到的錯(cuò)誤輸入的數(shù)量，從而降低了電子設(shè)備的資源利用率。

因此，蘋果專利中公開(kāi)的各種實(shí)現(xiàn)方式能夠讓用戶有效地參與（例如，操作）內(nèi)容操作區(qū)域內(nèi)的內(nèi)容。例如，當(dāng)手指操作數(shù)據(jù)顯示手指可穿戴設(shè)備正在計(jì)算機(jī)生成的觸控板表示上畫圓時(shí)，電子設(shè)備就會(huì)在內(nèi)容操作區(qū)域內(nèi)顯示圓的相應(yīng)表示。因此，與其他設(shè)備相比，電子設(shè)備在接觸內(nèi)容操作區(qū)域時(shí)能提供更強(qiáng)的控制力和準(zhǔn)確性。

手指可穿戴設(shè)備可由用戶的手指穿戴。在某些實(shí)施方案中，電子設(shè)備根據(jù)手指操作數(shù)據(jù)以6DoF追蹤手指。因此，即使物理物體遮擋了手指可穿戴設(shè)備的一部分，電子設(shè)備也能繼續(xù)從手指可穿戴設(shè)備接收手指操作數(shù)據(jù)。

下面是一系列蘋果專利圖，展示了電子設(shè)備將計(jì)算機(jī)生成的觸控板映射到Vision Pro中的內(nèi)容操作區(qū)域的示例。

圖源：patentlyapple

上述專利圖中的電子設(shè)備與頭戴式設(shè)備相對(duì)應(yīng)，后者包括一個(gè)集成顯示屏，用于顯示操作環(huán)境的表示。

顯示數(shù)據(jù)可由 XR 環(huán)境來(lái)表征。例如，圖像傳感器獲取表示物理桌 #302 和物理燈 #304 部分的圖像數(shù)據(jù)，生成的顯示數(shù)據(jù)顯示在顯示器 #312 上，并顯示物理桌和物理燈部分的各自表示。

在某些實(shí)施方案中，電子設(shè)備（HMD）包括透視顯示器。透視顯示器允許來(lái)自物理環(huán)境的環(huán)境光穿過(guò)透視顯示器，物理環(huán)境的表示是環(huán)境光的函數(shù)。例如，透視顯示器是一種半透明顯示器，如具有光學(xué)透視功能的眼鏡。在某些實(shí)施方案中，透視顯示器是一種可實(shí)現(xiàn)物理表面光學(xué)透視的附加顯示器，例如光學(xué) HMD（OHMD）。

物理表面（例如，物理桌 #302）可在顯示屏 #312 內(nèi)與內(nèi)容操作區(qū) #330 一起觀看，內(nèi)容操作區(qū) #330 與觸控板 #324 分離。

例如，內(nèi)容操作區(qū)域包括應(yīng)用內(nèi)容，如網(wǎng)絡(luò)瀏覽器內(nèi)容、文字處理內(nèi)容、繪圖應(yīng)用內(nèi)容等。根據(jù)來(lái)自手指可穿戴設(shè)備 #320 的手指操作數(shù)據(jù)，HMD 確定觸控板與內(nèi)容操作區(qū)域之間的映射。

正如蘋果公司所介紹的，蘋果Vision Pro用戶可以使用虛擬鍵盤工作，而今天的專利則證實(shí)，通過(guò)手指設(shè)備，用戶將可以使用虛擬觸控板來(lái)操作Vision Pro中的內(nèi)容。

想了解全部專利細(xì)節(jié)，請(qǐng)查看蘋果公司的專利申請(qǐng) 20230376110。

圖源：patentlyapple