編譯/VR陀螺

今天，美國(guó)專利商標(biāo)局公布了蘋果公司的兩項(xiàng)專利申請(qǐng)，涉及 Vision Pro 上的空間視頻和空間照片，其內(nèi)容也可在iPhone 15 Pro上創(chuàng)建。

專利一：XR錄制器

蘋果公司的這項(xiàng)專利涵蓋了主題技術(shù)的實(shí)現(xiàn)，提供了記錄XR體驗(yàn)的系統(tǒng)和方法，這種體驗(yàn)可以在以后從不同的視角或角度回放。

該技術(shù)涵蓋一種 XR 系統(tǒng)，該系統(tǒng)提供XR內(nèi)容的錄制、存儲(chǔ)、編輯、管理和回放，以方便在 XR 環(huán)境中從不同的視角重新觀看 XR 體驗(yàn)。在一個(gè)示例中，在一段時(shí)間內(nèi)捕獲關(guān)于設(shè)備所在物理環(huán)境的有時(shí)間順序的3D信息（例如，來(lái)自一個(gè)或多個(gè)深度傳感器的深度信息），用于體驗(yàn)的XR錄制。

在基本相同的時(shí)間段內(nèi)，視頻和/或音頻內(nèi)容（例如，包括空間音頻內(nèi)容）可由設(shè)備采集和/或顯示。在基本相同的時(shí)間段內(nèi)，計(jì)算機(jī)生成（CG）的內(nèi)容被顯示在環(huán)境視圖的一部分上。與該時(shí)間段內(nèi)顯示的 CG 內(nèi)容相對(duì)應(yīng)的內(nèi)容也被捕獲為有時(shí)間順序的 CG 內(nèi)容，并與有時(shí)間順序的3D信息（例如，包括深度信息）、元數(shù)據(jù)（包括場(chǎng)景、視頻和/或音頻的相關(guān)信息）一起按時(shí)間順序存儲(chǔ)。

與在時(shí)間段內(nèi)顯示的 CG 內(nèi)容相對(duì)應(yīng)的、由 XR 系統(tǒng)捕獲的 CG 內(nèi)容可以包括場(chǎng)景圖、在時(shí)間段內(nèi)顯示的 CG 內(nèi)容的3D幾何圖形、紋理、材質(zhì)、動(dòng)畫等，和/或如果記錄用戶在時(shí)間段內(nèi)向場(chǎng)景中的其他方向或位置看的話，在時(shí)間段內(nèi)會(huì)顯示CG內(nèi)容的3D幾何圖形、紋理、材質(zhì)、動(dòng)畫等，這樣就可以從任何角度回放 XR 記錄。

在記錄期間（如實(shí)時(shí)或在線）和/或記錄之后（如離線），還可以（根據(jù)深度信息、視頻、音頻和/或其他傳感器數(shù)據(jù)）生成物理環(huán)境的3D重建，存儲(chǔ)3D重建，在某些示例中，還可以存儲(chǔ)按時(shí)間排序的重建軌跡，與按時(shí)間排序的 CG 內(nèi)容、按時(shí)間排序的3D信息、元數(shù)據(jù)、視頻和/或音頻在時(shí)間上保持一致。

根據(jù)蘋果公司 iPhone 15 的營(yíng)銷材料，該系統(tǒng)主要是為蘋果 Vision Pro 設(shè)計(jì)的，不過(guò) iPhone 15 Pro 將允許用戶在今年晚些時(shí)候拍攝“空間視頻”。當(dāng) Vision Pro 于 2024 年推出時(shí)，這些視頻將可以在 Vision Pro 上播放。

蘋果公司還有趣地暗示，實(shí)時(shí) 3D 視頻可能會(huì)在汽車擋風(fēng)玻璃上呈現(xiàn)。

圖源：patentlyapple

蘋果專利圖 2 展示了一個(gè)可以實(shí)現(xiàn)的軟件架構(gòu)示例；圖 3 展示了根據(jù)主題技術(shù)的實(shí)施方案，電子設(shè)備的其他功能。

蘋果專利圖 6 展示了錄制XR體驗(yàn)的示例功能；下面的蘋果專利圖 5 展示了錄制、高級(jí)編輯和播放XR體驗(yàn)的各個(gè)階段。高級(jí)編輯說(shuō)明了用戶如何在森林拍攝的場(chǎng)景中添加一只虛擬熊。未來(lái)，這種簡(jiǎn)單的 XR 編輯可能會(huì)非常有趣。

圖源：patentlyapple

如需查看該專利的詳細(xì)信息，請(qǐng)查閱蘋果專利申請(qǐng) 20230298282。

專利二：3D照片

蘋果公司的第二項(xiàng)專利涉及設(shè)備、系統(tǒng)和方法，這些設(shè)備、系統(tǒng)和方法可根據(jù)用戶在 XR 環(huán)境中的觀看位置和 3D 照片在 XR 環(huán)境中的位置，確定如何在XR環(huán)境中呈現(xiàn)3D照片（例如，3D、2D、模糊或完全不呈現(xiàn)）。

在一些實(shí)施方案中，可在具有處理器的電子設(shè)備上獲得3D照片，該3D照片是基于由圖像捕捉設(shè)備捕捉的一個(gè)或多個(gè)圖像創(chuàng)建的不完整3D表示。在一些實(shí)施方案中，確定電子設(shè)備相對(duì)于 3D 照片放置位置的查看位置，并根據(jù)查看位置確定 3D 照片的展示模式。

圖源：patentlyapple

在某些實(shí)施方案中，根據(jù) XR 環(huán)境中的展示模式在放置位置提供 3D 照片。

想了解更多專利詳情，請(qǐng)查看蘋果專利申請(qǐng) 20230298278。

來(lái)源：patentlyapple