文/VR陀螺 冉啟行
2023 蘋果秋季發(fā)布會上,iPhone 15 Pro 系列帶來了一個彩蛋功能——空間視頻拍攝。
該功能將 iPhone 與 Vision Pro 進(jìn)行了生態(tài)聯(lián)動,不僅增強(qiáng)了 Vision Pro 的用戶生活場景,更能為明年 Vision Pro 的銷售埋下伏筆。
伴隨著 iOS 17.2 beta 2 版本的推出,我們終于得以看見“空間視頻”的真面目。本文,筆者通過 iPhone 15 Pro 空間視頻拍攝,3D 內(nèi)容格式轉(zhuǎn)換、并基于市場主流 XR 硬件進(jìn)行體驗(yàn),推測未來產(chǎn)業(yè)風(fēng)向。
空間視頻拍攝需求:約50cm距離,要兩倍內(nèi)存占用
iOS 17.2 beta 2 中,空間視頻拍攝功能需要用戶主動啟動。在 iPhone 主“設(shè)置”應(yīng)用程序中,打開“相機(jī)”選項(xiàng),然后打開“格式”,然后將“Apple Vision Pro 的空間視頻”選項(xiàng)切換為“打開”。
當(dāng)打開相機(jī)應(yīng)用程序并將其切換為視頻拍攝模式時,在左下角將看到一個 Vision Pro 的頭顯小圖標(biāo)。點(diǎn)擊它將其打開(它會變成黃色),然后將 iPhone 旋轉(zhuǎn)到橫向就可以進(jìn)行拍攝了。
圖源:VR陀螺
值得注意的是,目前空間視頻的拍攝參數(shù)中 1080P 分辨率、30 fps 是固定的設(shè)置,無法進(jìn)行修改。在對于某一物體進(jìn)行空間視頻拍攝時,手機(jī)鏡頭離物體最近的距離被要求為至少約 50 cm以上——這與開啟“人像模式”時類似,要求更遠(yuǎn)的距離,以獲取更多的信息。
空間視頻的拍攝需要用到 iPhone 15 Pro 的主攝鏡頭+廣角鏡頭,兩顆鏡頭的共同使用,最終形成具備“景深”效果的空間視頻。當(dāng)然,這樣的拍攝和如此內(nèi)容,也提升了其內(nèi)存占用。
VR 陀螺實(shí)測發(fā)現(xiàn),一分鐘的空間視頻拍攝會占用 120 M。相比之下,同等規(guī)格參數(shù),普通視頻拍攝的在 60M 左右。為了區(qū)分傳統(tǒng)2D視頻??臻g視頻拍攝完成后,視頻的左上角會出現(xiàn)一個空間視頻的表示符「空間」,文件后綴方面與普通視頻保持一致,都為 MOV。
圖源:VR陀螺
其他方面,與普通視頻相比,空間視頻在顏色描述文件上也有特定的區(qū)別,表示為“HD(1-1-1)”,普通視頻則表示為“BT.2020 HLG (9-18-9)”,這是一組有趣的數(shù)據(jù)對比。
相關(guān)資料顯示:HD (1-1-1) 和 BT.2020 HLG (9-18-9) 是兩種不同的色彩描述文件,它們的色彩空間標(biāo)簽、傳輸特性和矩陣系數(shù)各不相同。HD (1-1-1) 是標(biāo)準(zhǔn)的 Rec.709 文件,這是一種應(yīng)用于廣播電視行業(yè)的顏色空間標(biāo)準(zhǔn),其色域較窄,但廣泛應(yīng)用于各種顯示設(shè)備上。
相比之下,BT.2020 HLG (9-18-9) 是 ITU-R BT.2020 標(biāo)準(zhǔn)的一部分,這是一種新的高動態(tài)范圍(HDR)視頻標(biāo)準(zhǔn),其色域更廣,亮度級別更高,旨在實(shí)現(xiàn)更加逼真的影像效果。
換言之,同等分辨率下,空間視頻采用了比普通視頻“一些參數(shù)”略遜一籌的色彩描述文件。采用 HD(1-1-1)可能是出于對空間視頻的效果、效率、準(zhǔn)確性和一致性的考慮,有待專業(yè)人士進(jìn)一步探討。
看完了拍攝空間視頻的流程,以及其基本參數(shù)格式,我們再來看空間視頻的播放??臻g視頻最初設(shè)定只能在 Apple Vision Pro 上進(jìn)行體驗(yàn),然而,通過由 @Naituw 開發(fā)的第三方軟件 Spatialify 可以將空間視頻轉(zhuǎn)化為 SBS 這樣更常見的 3D 視頻格式,以在其他支持 3D 的設(shè)備上播放。
圖源:VR陀螺
空間視頻+三方軟件,體驗(yàn)不止Vision Pro
“空間視頻包含適用于你雙眼的兩路圖像,如果這些圖像能被投射到對應(yīng)的眼鏡里,就會產(chǎn)生 3D 效果。”在 Spatialify 的介紹里,我們看到了這樣的空間視頻原理解釋。
這也意味著只要是能夠“實(shí)現(xiàn)雙目分別呈像”的設(shè)備,即可播放空間視頻,并不局限于蘋果Vision Pro。
圖源:VR陀螺
目前,Spatialify 支持 2D 模式、平行眼模式、Cardboard 模式三種播放形式,并且用戶可以在播放界面調(diào)整視頻參數(shù)(畫面縮放、瞳距修正),以通過手機(jī)觀看。
通過“斗雞眼”的方式,的確能看出 3D 效果,不過對于眼睛也確實(shí)有些許難受。好在 Spatialify 支持將空間視頻導(dǎo)出其他 3D 格式,目前包括半寬左右格式(HSBS)、全寬左右格式(FSBS)、半高上下格式(HOU)、全高上下格式(FOU)四種格式。
視頻導(dǎo)出界面有一個「水平視差整」的應(yīng)用功能。據(jù)介紹空間視頻可能包含“Horizontal Disparity Adjustment 元數(shù)據(jù)”,開啟后,會根據(jù)該信息調(diào)整輸出的視頻圖像可以得到更準(zhǔn)確的視差效果,但會損失少量畫面內(nèi)容(通常少于 5%)。
還有一個名為 Spherical Video V2 的元數(shù)據(jù)選項(xiàng)。據(jù)介紹,開啟后,Stereo3D 元數(shù)據(jù)(st3d box)將被寫入輸出文件,這可以幫助識別視頻的 3D 格式和布局。此元數(shù)據(jù)支持 HSBS 和 HOU 格式,不過上傳到的視頻平臺可能不能完全支持,如 YouTube 目前僅支持 HSBS。
圖源:VR陀螺
做完了這一系列的復(fù)雜工作,現(xiàn)在我們終于可以在 VR 頭顯和 XR 眼鏡上體驗(yàn)空間視頻了。
體驗(yàn)部分:空間層次感,從設(shè)備到內(nèi)容
(一)Quest 3自帶播放器體驗(yàn)空間視頻
通過 Quest 3 的文件管理器,可打開上述四種格式的 3D 視頻,只需在播放器右下角進(jìn)行選擇即可。
圖源:VR陀螺
“景深效果、距離感、3D感”,在打開功能鍵的那一刻真正體驗(yàn)到了蘋果 Vision Pro 所宣傳的空間視頻的魅力。筆者也真正明白了它所包含的“空間”的視覺意義,即三維立體感,肉眼可以明顯感受到物體前后的距離,層次較為分明,特別是當(dāng)人左右前后移動時,效果更明顯。
(P.S. 家人們,千萬別拉大畫面,走近看,差點(diǎn)暈死,滿屏雪花,“沉浸感滿滿”,想吐。)
圖源:VR陀螺
空間視頻雖不像 360°/180° 全景視頻那樣擁有超大畫面,但畫幅小的一個好處在于它擁有足夠高的清晰度,可以讓用戶更好體驗(yàn)到 3D 的魅力。整體立體感相對不錯,不過,筆者在體驗(yàn)由 Spherical Video V2 元數(shù)據(jù)優(yōu)化后的視頻,會看到視頻畫面在移動中可能產(chǎn)生些許畸變。
另外,值得注意的一點(diǎn)是,空間視頻在拍攝時,一定要注意拍攝物體本身物理空間需要存在一定深度差異,最終 3D 效果才會更加明顯。正如蘋果所宣傳的那樣,記錄人在一定空間范圍的場景活動,或是更好的 3D 拍攝對象。
圖源:VR陀螺
從已體驗(yàn)過 Vision Pro 的部分開發(fā)者那里,筆者聽到了“iPhone 15 Pro 拍攝空間視頻效果更好的反饋”——在 Quest 3 的空間視頻體驗(yàn)中。
(二)PICO 4:基于《空間西洋鏡》體驗(yàn)
當(dāng)然,對于國內(nèi)用戶來說,體驗(yàn)空間視頻最好的 VR 設(shè)備可能還是親民的 PICO 4,筆者也用 PICO 4 進(jìn)行了簡單體驗(yàn),不過這次主要使用的是一款名為《空間西洋鏡》的軟件,在此感謝業(yè)內(nèi)朋友的推薦。
《空間西洋鏡》是一款可提供瀏覽空間照片、空間視頻、并可以調(diào)節(jié)瞳距的播放器軟件,由開發(fā)者 @Eis4TY(Github)打造,該軟件兼容 PICO & Quest 平臺。
與 Quest 3 的 MR 環(huán)境不同,《空間西洋鏡》提供了一個沉浸式的“模擬室內(nèi)”虛擬環(huán)境,實(shí)際體驗(yàn)會發(fā)現(xiàn)其 UI 似乎高度模擬 Vision Pro,主打簡約美學(xué)。
圖源:VR陀螺
從筆者上述導(dǎo)入的空間視頻其實(shí)可以非常明顯看到“手臂”與“背景”的距離感,并且手臂仿佛增加了如人像模式的“特寫”一般。不過,體驗(yàn)并非完美,當(dāng)筆者拉大播放器畫框之后,在視頻播放過程中,由于鏡頭的運(yùn)動,可以看到空間視頻邊緣明顯的畸變——這應(yīng)該是手機(jī)拍攝本身帶來的一些局限性。
有業(yè)內(nèi)朋友指出,蘋果 Vision Pro 的 UI 界面邊緣有毛玻璃虛化,在播放空間視頻時,邊緣的畸變就看不出來了——不得不說這是一個十分巧妙(心機(jī))的設(shè)計。
圖源:VR陀螺
(三)雷鳥、Rokid分體式XR眼鏡體驗(yàn)
除 VR 頭顯外,XR 眼鏡同樣支持空間視頻的播放,筆者主要測試了 Rokid 和雷鳥創(chuàng)新的 BB 方案分體式眼鏡。由于 iPhone 15 Pro 的 USB-C 接口,使得眼鏡可以通過數(shù)據(jù)線直連手機(jī),這使得空間視頻的播放,變得更容易。而無需像 VR 頭顯那樣,還需要一臺電腦做文件中轉(zhuǎn)站傳輸。
分體式 XR 眼鏡的使用非常便捷,但是這就不太利于筆者錄素材了,只能通過手機(jī)攝像頭二次拍攝。以下圖片僅供參考,空間視頻體驗(yàn)請以實(shí)際為準(zhǔn)。
市面上不少 XR 眼鏡支持 3D 格式的視頻播放,不過僅限于左右格式,也就是 HSBS 和 FSBS。XR 眼鏡直連手機(jī)后,即可打開 3D 視頻。需注意:XR 眼鏡通常默認(rèn)投屏 2D 顯示畫面,若需播放 3D 視頻,雷鳥 Air Plus 可通過長按左側(cè)撥輪按鍵,Rokid Air 長按亮度鍵 4 秒。
圖源:VR陀螺
相比于,VR 頭顯的空間視頻播放——基于 iPhone,在分體式 XR 眼鏡上的體驗(yàn),可以說是一個固定的大屏,雖然沒有 6DoF 那樣可隨意走動的自由,不同角度的觀察,但是 3D 的立體感受依然深刻,值得體驗(yàn)一番。
另外,在實(shí)際體驗(yàn)中半寬左右格式(HSBS)在 XR 眼鏡上播放時,會感覺畫面被切割掉了一半,讓本就近視的筆者,只能睜一只眼閉一只眼感受 3D ,十分難受。
從PGC到UGC,手機(jī)3D拍攝未來或成標(biāo)配
空間視頻的出現(xiàn),為視頻內(nèi)容的生產(chǎn)和消費(fèi)帶來了新的變化。
以往 3D 拍攝需要專業(yè)的設(shè)備和技術(shù),只有影視制作公司或?qū)I(yè)機(jī)構(gòu)、攝影師才能完成,而且成本高昂,播放方式也受限。這導(dǎo)致了 3D 視頻內(nèi)容的供給相對稀缺,主要以 PGC(專業(yè)生產(chǎn)內(nèi)容)為主,而 UGC(用戶生產(chǎn)內(nèi)容)近乎沒有,很少流通。
iPhone 15 Pro 空間視頻拍攝功能的出現(xiàn),打破了這種局面,讓 3D 拍攝的門檻降低到了手機(jī),讓普通用戶也可以輕松拍攝出具有立體感和逼真感的視頻,從而有利于促進(jìn) UGC 的發(fā)展。空間視頻的 UGC,不僅可以豐富視頻內(nèi)容的多樣性,也可以激發(fā)用戶的創(chuàng)造力和參與度。
用戶可以利用空間視頻,來記錄自己的生活、旅行、工作等場景,讓觀眾有一種身臨其境的感受;也可以利用空間視頻,來表達(dá)自己的觀點(diǎn)、情感、想象等,讓觀眾有一種與作者共鳴的感覺。正如此前筆者在另外一篇文章中所述,新的內(nèi)容展現(xiàn)形式崛起的背后,或會有新的大平臺出現(xiàn),再造一個 XR 版“抖音”神話。
圖源:網(wǎng)絡(luò)
蘋果一直是智能手機(jī)行業(yè)的創(chuàng)新者、引領(lǐng)者,伴隨著 iPhone 15 Pro 系列空間視頻拍攝的支持,相信其他手機(jī)廠商也不會任由其壯大,從布局到落子是一個時間節(jié)點(diǎn)配合的問題。
根據(jù)最新消息顯示,國內(nèi)手機(jī)巨頭華為明年將推出 VR 眼鏡產(chǎn)品,定位高端旗艦產(chǎn)品,對標(biāo)蘋果 Vision Pro,將搭載旗艦處理器,并擁有內(nèi)部風(fēng)扇驅(qū)動散熱模塊、支持外接電池等。另據(jù)韓媒報道,三星電子移動體驗(yàn)部門已于近日確認(rèn)其 XR 設(shè)備將于明年 12 月實(shí)現(xiàn)批量生產(chǎn),初始產(chǎn)量(出貨量)設(shè)定為 3 萬臺。
其他手機(jī)廠商,包括 OPPO、vivo、榮耀等也有相關(guān)動作?;谑謾C(jī)的 3D 拍攝,或成未來三年內(nèi)手機(jī)攝像頭內(nèi)卷的下一個功能指標(biāo),而 XR 硬件也將在這內(nèi)容沉淀的時期,逐步擴(kuò)大發(fā)展。
投稿/爆料:tougao@youxituoluo.com
稿件/商務(wù)合作: 六六(微信 13138755620)
加入行業(yè)交流群:六六(微信 13138755620)
版權(quán)申明:本文為VR陀螺原創(chuàng),任何第三方未經(jīng)授權(quán)不得轉(zhuǎn)載。如需轉(zhuǎn)載請聯(lián)系微信:vrtuoluo233 申請授權(quán),并在轉(zhuǎn)載時保留轉(zhuǎn)載來源、作者以及原文鏈接信息,不得擅自更改內(nèi)容,違規(guī)轉(zhuǎn)載法律必究。文中有圖片、視頻素材來自互聯(lián)網(wǎng)或無法核實(shí)出處,如涉及版權(quán)問題,請聯(lián)系本網(wǎng)站協(xié)商處理。
元宇宙數(shù)字產(chǎn)業(yè)服務(wù)平臺
下載「陀螺科技」APP,獲取前沿深度元宇宙訊息