編譯/VR陀螺

自2020年以來(lái)，蘋果公司已經(jīng)公布了一系列空間音頻專利，專利顯示蘋果希望將該技術(shù)應(yīng)用于AirPods Pro、未來(lái)的VR頭顯，以及支持VR游戲等。今天，美國(guó)專利商標(biāo)局公布了蘋果的一項(xiàng)延續(xù)性專利，題為 "音頻空間管理"。

蘋果公司的專利涵蓋了使用電子設(shè)備管理空間音頻的技術(shù)，然而一般來(lái)說(shuō)，這些技術(shù)是繁瑣和低效的。例如，一些技術(shù)沒(méi)有通過(guò)音頻的空間管理為用戶提供電子設(shè)備狀態(tài)的環(huán)境感知。

再比如，一些現(xiàn)有技術(shù)使用復(fù)雜和耗時(shí)的用戶界面，其中可能包括多個(gè)按鍵或擊鍵。現(xiàn)有的技術(shù)在使用上超過(guò)了必要的時(shí)間，浪費(fèi)了用戶時(shí)間和設(shè)備電量。續(xù)航能力的考慮對(duì)于依賴電池操作的設(shè)備尤其重要。此外，現(xiàn)有的音頻技術(shù)不能充分地幫助用戶瀏覽圖形用戶界面。

因此，本專利中描述的技術(shù)為電子設(shè)備提供了更快、更有效的方法和界面來(lái)管理空間音頻。這樣的方法和界面可以選擇補(bǔ)充或取代其他管理空間音頻的方法。

專利中的方法和界面減少了用戶的認(rèn)知負(fù)擔(dān)，并產(chǎn)生了一個(gè)更有效的人機(jī)界面。對(duì)于依賴電池操作的計(jì)算設(shè)備，這樣的方法和界面可以節(jié)省電力，并增加電池充電的間隔時(shí)間。

在下面的圖13A，一個(gè)iPhone（#1300）顯示了一個(gè)音樂(lè)播放器（#1304），它包括專輯封面（#1304a）和可選的軸（#1304b）。專輯封面對(duì)應(yīng)的是iPhone正在播放的歌曲。在一些例子中，該歌曲包括多個(gè)音頻流。在這個(gè)例子中，歌曲包括五個(gè)音頻流，其中每個(gè)音頻流對(duì)應(yīng)于一個(gè)特定的樂(lè)器。

圖源：patentlyapple

在圖13A，iPhone使用左(#1358a)和右(#1358b)揚(yáng)聲器產(chǎn)生歌曲的音頻(包括所有五個(gè)音頻流)，而不把音頻放在空間中(例如，iPhone不應(yīng)用任何的耳際時(shí)間差、HRTF或交叉抵消)。

例如，這導(dǎo)致用戶認(rèn)為音頻在用戶的頭部，如圖8F-8G的俯視圖850中的音頻元素（#1354）所示，該音頻元素對(duì)應(yīng)于歌曲，包括五個(gè)音頻流。iPhone被配置成這樣，在承受器（#1304c）上收到的用戶輸入可以控制音樂(lè)，例如暫停、播放、快進(jìn)和倒帶音樂(lè)。

在下面的專利圖13H中，我們能夠看到空間音頻如何在5個(gè)不同的流中分離每個(gè)樂(lè)器，以涵蓋歌手、鍵盤、鼓、低音吉他和節(jié)奏吉他。

圖源：patentlyapple

蘋果于2019年8月獲得了空間音頻專利。今天的專利是一項(xiàng) "延續(xù)性專利"，這就像專利更新一樣，蘋果能夠通過(guò)提供額外的專利權(quán)利要求來(lái)更新技術(shù)和/或確保特定的功能。在今天的延續(xù)專利中，蘋果增加了13項(xiàng)支持空間音頻的新專利要求。

想查看新的專利權(quán)利要求可查閱蘋果延續(xù)專利20210232359。

由于目前是一個(gè)專利淡季，因此這也是延續(xù)性專利最突出的時(shí)候。以下是美國(guó)專利商標(biāo)局今天公布的其他關(guān)鍵延續(xù)性專利：

專注于虛擬和增強(qiáng)現(xiàn)實(shí)系統(tǒng)

蘋果公司的延續(xù)專利涵蓋了基于注視點(diǎn)追蹤信息在虛擬現(xiàn)實(shí)（VR）或增強(qiáng)現(xiàn)實(shí)（AR）設(shè)備中聚焦的方法和裝置。VR/AR頭戴式顯示器（HMD）的實(shí)施方案可包括一個(gè)用于檢測(cè)用戶眼睛位置和運(yùn)動(dòng)的注視點(diǎn)追蹤系統(tǒng)。

對(duì)于AR應(yīng)用，注視點(diǎn)追蹤信息可用于引導(dǎo)外部攝像機(jī)向用戶的注視方向聚焦，從而使攝像機(jī)聚焦于用戶正在看的物體。

蘋果公司的專利圖2顯示了一個(gè)實(shí)現(xiàn)注視點(diǎn)追蹤系統(tǒng)的HMD實(shí)例的側(cè)視圖；圖1E說(shuō)明了至少部分基于注視點(diǎn)追蹤信息的VR頭顯中的眼睛鏡片聚焦。

圖源：patentlyapple

蘋果公司于2021年4月19日獲得了這項(xiàng)專利。今天，美國(guó)專利商標(biāo)局公布了蘋果公司的延續(xù)專利，并透露蘋果公司廢除了他們?cè)瓉?lái)的20項(xiàng)權(quán)利要求，以連續(xù)編號(hào)為21-40的20項(xiàng)新權(quán)利要求取而代之。以下是一些關(guān)鍵的新權(quán)利要求：

專利權(quán)利要求#21：一個(gè)系統(tǒng)，包括：一個(gè)頭戴式顯示器（HMD），顯示視覺(jué)內(nèi)容供用戶觀看，其中HMD包括：一個(gè)或多個(gè)外部攝像機(jī)，用以捕獲環(huán)境的視頻；至少一個(gè)顯示面板，基于一個(gè)或多個(gè)外部攝像機(jī)捕獲的環(huán)境視頻顯示視覺(jué)內(nèi)容的幀，供用戶觀看；以及一個(gè)注視點(diǎn)追蹤系統(tǒng)，包括左眼和右眼跟蹤攝像機(jī)，捕獲用戶眼睛反射的紅外或近紅外光；以及一個(gè)控制器，包括一個(gè)或多個(gè)處理器，其中該控制器從注視點(diǎn)追蹤系統(tǒng)獲得追蹤信息；從注視點(diǎn)追蹤信息確定用戶的注視方向；在確定的用戶注視方向上確定環(huán)境中物體的距離；以及記錄與確定的物體距離相對(duì)應(yīng)的深度信息或焦點(diǎn)信息，與視覺(jué)內(nèi)容的幀一起，生成錄制的視頻。

專利權(quán)利要求#25：權(quán)利要求24的系統(tǒng)包括，一個(gè)或多個(gè)外部攝像機(jī)：在用戶注視點(diǎn)的確定方向上對(duì)環(huán)境中的物體進(jìn)行聚焦；并向控制器提供包括物體聚焦信息的反饋；其中，為了確定用戶注視點(diǎn)確定方向上的物體距離，控制器會(huì)根據(jù)物體的聚焦信息確定距離。

專利權(quán)利要求#26：根據(jù)權(quán)利要求21的系統(tǒng)，其中HMD能夠回放錄制的視頻供用戶觀看，以及其中控制器可以根據(jù)深度信息或物體的焦點(diǎn)信息指示左和右光學(xué)透鏡調(diào)整焦點(diǎn)，以使顯示的物體的光學(xué)視差與用戶的眼睛會(huì)聚相匹配。

專利權(quán)利要求#27：根據(jù)權(quán)利要求26的系統(tǒng)，其中左和右光學(xué)透鏡在透鏡的光學(xué)無(wú)限遠(yuǎn)處或接近光學(xué)無(wú)限遠(yuǎn)處形成在至少一個(gè)顯示面板上框架的虛擬圖像，以及，為了指示左和右光學(xué)透鏡根據(jù)物體的深度信息或焦點(diǎn)信息調(diào)整焦點(diǎn)，控制器會(huì)指示光學(xué)透鏡降低折光率，使物體在用戶看來(lái)處于確定的距離，而不是光學(xué)無(wú)限遠(yuǎn)處。

要查看剩余的16項(xiàng)專利權(quán)利要求和該專利的總體情況，請(qǐng)審查蘋果這項(xiàng)延續(xù)性專利20210235054。

來(lái)源：patentlyapple