【編譯:VR陀螺】
沉浸式音頻專家Zylia致力于推動(dòng)3D音頻錄制的界限,無(wú)論是用于學(xué)術(shù)研究、藝術(shù)、游戲、音樂(lè)、體育,還是在VR環(huán)境中?,F(xiàn)在,該公司研發(fā)出六自由度自由錄制音頻系統(tǒng),能夠在“虛擬音樂(lè)廳”里生成3D聲音,這是一種具有突破性的沉浸式聽(tīng)覺(jué)體驗(yàn)。
該公司稱,“ZYLIA 6DoF 自由錄制音頻系統(tǒng)”(ZYLIA’s 6 Degrees of Freedom Navigable Audio )通過(guò)捕獲每個(gè)麥克風(fēng)的球形聲場(chǎng)內(nèi)的所有音頻,讓創(chuàng)作者可以在VR中錄制音樂(lè)表演、問(wèn)答內(nèi)容和其他Live音頻。簡(jiǎn)而言之,Zylia的6DoF音頻解決方案能夠讓你在使用VR頭顯或電腦時(shí),在整個(gè)現(xiàn)實(shí)環(huán)境中進(jìn)行物理移動(dòng)以創(chuàng)建自己的音頻路徑。每次更改聲源位置時(shí),音頻的音量和方向都會(huì)發(fā)生變化,就像在現(xiàn)實(shí)生活中一樣:如果音樂(lè)聲音太大,你可以向后退幾步,聲音就變小了。
Zylia首席執(zhí)行官Tomasz?ernicki說(shuō):“我們公司的理念是讓藝術(shù)家和觀眾聚集在一起,這也是我們以6自由度開(kāi)發(fā)此自由錄制音頻系統(tǒng)的原因,以便演出中的多方群體在虛擬世界中連接起來(lái)。”
“當(dāng)我們展望未來(lái)時(shí),我們看到的是與創(chuàng)意藝術(shù)互動(dòng)的完全不同的世界。在流媒體平臺(tái)中,人們能夠參加任何藝術(shù)家的音樂(lè)會(huì),實(shí)現(xiàn)真正的沉浸式家庭音樂(lè)會(huì),并與朋友一起體驗(yàn)。”Tomasz ?ernicki補(bǔ)充說(shuō)。
今年早些時(shí)候,Zylia與波蘭的波茲南愛(ài)樂(lè)樂(lè)團(tuán)合作,展示了其6DoF音頻技術(shù)的真正力量。該公司使用了30臺(tái)ZYLIA ZM-1S球形、雙極性麥克風(fēng),同步捕獲了360度的現(xiàn)場(chǎng)聲景。這款三階Ambisonics環(huán)繞聲(一種全球面環(huán)繞聲格式:除了水平面外,它還涵蓋了聽(tīng)眾上方和下方的聲源)麥克風(fēng)具有19個(gè)膠囊麥克風(fēng)陣列、24位記錄分辨率。這意味著創(chuàng)作者可以在更遠(yuǎn)的距離上獲得更清晰、高保真的音頻錄音。
Toernicki解釋說(shuō):“為了記錄波茲南愛(ài)樂(lè)樂(lè)團(tuán)的演奏,我們?cè)谝魳?lè)廳中放置了30臺(tái)具有同步功能的三階Ambisonics麥克風(fēng)ZYLIA ZM-1S。這些麥克風(fēng)被放置在音樂(lè)舞臺(tái)中間的架子上,并通過(guò)USB數(shù)據(jù)線連接到計(jì)算機(jī)。我們使用了2臺(tái)筆記本電腦進(jìn)行記錄,并使用了一臺(tái)臺(tái)式電腦 Linux工作站作為備份。這30個(gè)麥克風(fēng)為我們提供了600個(gè)音頻通道(每個(gè)ZM-1S 20個(gè)音頻通道)。最終,我們收集了3個(gè)小時(shí)的錄音和700 GB的音頻數(shù)據(jù)。”
然后,該團(tuán)隊(duì)通過(guò)Zylia軟件,在虛擬空間中鏡像呈現(xiàn)30個(gè)麥克風(fēng)的真實(shí)位置,從而使聽(tīng)眾能夠從多個(gè)角度體驗(yàn)音樂(lè),就像在現(xiàn)場(chǎng)一樣。
除了ZYLIA ZM-1S之外,該公司還使用了一套Zylia軟件以實(shí)現(xiàn)愛(ài)樂(lè)樂(lè)團(tuán)的虛擬演奏,該軟件包括ZYLIA 6DoF記錄器,讓ZYLIA ZM-1S麥克風(fēng)實(shí)現(xiàn)實(shí)時(shí)錄音;ZYLIA 6DoF同步器,用于上傳錄音和同步錄音內(nèi)容;ZYLIA Ambisonics Converted軟件,可將ZM-1S多通道錄音轉(zhuǎn)換為高階Ambisonics;以及ZYLIA 6DoF HOA渲染器,該插件可處理和渲染ZYLIA系統(tǒng)的3D音頻內(nèi)容。
波茲南愛(ài)樂(lè)樂(lè)團(tuán)首席客席指揮?ukasz Borowicz說(shuō):“音樂(lè)家和聽(tīng)眾之間一直存在著界限。但一旦越過(guò)邊界,你將進(jìn)入一個(gè)真實(shí)的音樂(lè)世界。在過(guò)去的幾個(gè)月中,我們面臨著不能舉辦現(xiàn)場(chǎng)音樂(lè)會(huì)的問(wèn)題,而在線上舉辦時(shí),我們又因?yàn)橐绾握故敬髲d的聲音方面產(chǎn)生了很多問(wèn)題。而ZYLIA系統(tǒng)讓真正實(shí)現(xiàn)沉浸式音樂(lè)會(huì)成為可能。 ”
ZYLIA麥克風(fēng)與全景鏡頭結(jié)合
除了與愛(ài)樂(lè)樂(lè)團(tuán)合作之外,“ZYLIA 6DoF 自由錄制音頻 ”還可用于創(chuàng)建沉浸式、多點(diǎn)360度音頻視頻體驗(yàn)。例如,當(dāng)與全景攝像頭結(jié)合使用時(shí),ZYLIA麥克風(fēng)可用于讓聽(tīng)眾聽(tīng)到現(xiàn)場(chǎng)舞臺(tái)其他部分的聲音。
這種技術(shù)的潛在應(yīng)用場(chǎng)景是無(wú)限的。Zylia的3D音頻技術(shù)不僅可以為聽(tīng)眾提供更沉浸的音樂(lè)欣賞方式,而且還可以為音樂(lè)家和其他表演者提供一種與現(xiàn)場(chǎng)觀眾建立聯(lián)系的更有影響力的方式。隨著疫情影響,幾乎所有現(xiàn)場(chǎng)直播表演都被取消,演藝人員已開(kāi)始轉(zhuǎn)向流行的直播解決方案,以與其粉絲進(jìn)行遠(yuǎn)程連接。
投稿/爆料:tougao@youxituoluo.com
稿件/商務(wù)合作: 六六(微信 13138755620)
加入行業(yè)交流群:六六(微信 13138755620)
元宇宙數(shù)字產(chǎn)業(yè)服務(wù)平臺(tái)
下載「陀螺科技」APP,獲取前沿深度元宇宙訊息