文/VR陀螺 ZJ

在疫情的影響下，盡管觀眾在很大程度上不能親身前往各種音樂現(xiàn)場，但有了技術(shù)的加持，他們可以選擇使用VR體驗(yàn)現(xiàn)場表演。

這個(gè)領(lǐng)域的創(chuàng)企MelodyVR已經(jīng)與Live Nation合作，在倫敦標(biāo)志性的O2 Academy Brixton為觀眾們提供了360°的VR演出。

時(shí)長90分鐘的現(xiàn)場VR表演

（圖源：Derek Bremner）

這些節(jié)目包括Tom Grennan、Frank Carter & The Rattlesnakes、Burner Boy、Fontaines DC、Kaiser Chiefs和 Blossoms的90分鐘表演，歌迷可以選擇從多個(gè)鏡頭角度進(jìn)行觀看，并且能夠通過智能手機(jī)和VR頭顯的MelodyVR應(yīng)用程序觀看。

MelodyVR的技術(shù)生產(chǎn)經(jīng)理Matthew Williams說道："我們希望，最終用戶能夠通過在不同攝像機(jī)機(jī)位之間來回切換，自己成為現(xiàn)場音樂表演的導(dǎo)演。使用沉浸式視頻能夠?qū)⒏杳耘c他們喜愛的歌手聚集在一起，這在疫情期間顯得尤為重要，因?yàn)樗麄儫o法親自參加這些演出。"

 5臺4K 360º VR攝像機(jī)與6個(gè)“跳躍點(diǎn)”

5臺使用多個(gè)索尼4K傳感器的360º VR攝像機(jī)設(shè)備被安置在O2 Academy的前廳、舞臺一側(cè)和舞臺上的鼓手、鍵盤（或薩克斯、低音吉他等等，取決于表演的實(shí)際情況）以及主唱的位置。MelodyVR還為用戶提供了6個(gè)“跳躍點(diǎn)”，用戶可以在這6個(gè)不同視角之間來回切換，體驗(yàn)當(dāng)導(dǎo)演的感覺。

當(dāng)信號離開每臺攝像機(jī)時(shí)，它會通過由多臺 Blackmagic Design 設(shè)備組成的廣泛網(wǎng)絡(luò)進(jìn)行路由。30多臺Teranex Minis轉(zhuǎn)換HDMI、SDI和光纖，3臺Smart Videohub 12G 40x40作為制作的主矩陣管理所有的4K信號。

每個(gè)4K鏡頭信號都被輸送到裝有DeckLink（4K和8K）卡的電腦上，用于高分辨率360°視頻的拼接、播放和編碼，拼接軟件來自瑞典開發(fā)商Voysys。

Williams解釋說："拼接后的360°視頻是由一個(gè)16x9的等角圖像組成，并添加了頂部和底部圖像，觀眾實(shí)際上是把他們的頭放在一個(gè)三維視頻的球體中。"

拼接處理僅需400毫秒，并通過ATEM Constellation 8K切換畫面，它還能為MelodyVR的制作團(tuán)隊(duì)在現(xiàn)場和遠(yuǎn)程生成四個(gè)多視圖。

舞臺背后（圖源：ibc）

vMix是現(xiàn)場視頻制作軟件解決方案，帶有TouchDesigner，可用于圖形疊加和VFX動(dòng)畫。直播流從vMix輸入到云端，MelodyVR在那里擁有自己的定制云分發(fā)網(wǎng)絡(luò)。它能夠以多種比特率向訪問MelodyVR應(yīng)用程序或網(wǎng)絡(luò)播放器的終端用戶提供流媒體。

來自現(xiàn)場表演的所有信號，包括單個(gè)鏡頭和等距柱狀投影輸出，都以ProRes HQ格式記錄在Blackmagic Design HyperDeck Studio 12G中。

"這為我們提供了比特率和未來分級的最大范圍，"Williams說道。"如果我們需要重新拼接任何東西，就可以直接回到源頭去做。"

就像一場人滿為患的音樂會一樣，IMAG屏幕會顯示從各種Blackmagic PCC 6K、Micro Studio Cameras、URSA Mini Pro 4.6K和PTZ機(jī)器人攝像機(jī)拍攝各種角度的現(xiàn)場2D內(nèi)容，在這些地方他們無法讓操作員上臺。

Williams表示："360°沉浸式視頻并不是用戶經(jīng)常會體驗(yàn)到的東西，并且在音頻不同步或有某些技術(shù)問題的情況下，這些體驗(yàn)可能并不會太愉快。對我們來說，關(guān)注流的可靠性真的很重要。”

"我們在直播前會進(jìn)行多次彩排，并對不同類型的燈光和LED屏幕進(jìn)行多次內(nèi)部測試。我們不斷地把攝像機(jī)放在我們以前從未嘗試過的位置上，"Williams說道。

 疫情下的遠(yuǎn)程工作流程

社交距離的限制意味著一切設(shè)置都要比平時(shí)更加嚴(yán)格，制片人不得不削減現(xiàn)場工作人員的數(shù)量。

Williams表示："我們所謂的'作戰(zhàn)室'，也就是我們的操作室，大部分都是遠(yuǎn)程的。我們所有的拼接工作都是遠(yuǎn)程完成的。我們只會將一個(gè)核心團(tuán)隊(duì)放在現(xiàn)場，并對在現(xiàn)場的人員進(jìn)行多技能訓(xùn)練，以盡可能地實(shí)現(xiàn)遠(yuǎn)程操作。我們的機(jī)架系統(tǒng)是以一種保持社交距離的方式來設(shè)置的。我們所有的操作員都相隔兩米，并在現(xiàn)場有明確的隔離措施，這樣表演者們就不必與工作人員接觸了。我們在入口處使用QR碼，并記錄每個(gè)人，同時(shí)個(gè)人防護(hù)設(shè)備都是強(qiáng)制性的"。

在O2 Academy進(jìn)行的表演

（圖源：Derek Bremner）

他繼續(xù)說道："遠(yuǎn)程工作流程給我們的互聯(lián)網(wǎng)線路帶來了更大的壓力。我們有三條線路進(jìn)入學(xué)院，包括一條衛(wèi)星鏈路和兩條來自不同供應(yīng)商的硬接線，所以如果有任何問題發(fā)生，我們都保證會有即時(shí)備份。我們有多個(gè)操作員在這些節(jié)目中遠(yuǎn)程工作，有些遠(yuǎn)在美國，但有些在黑斯廷斯和英國其他地區(qū)。"

 虛擬舞臺上的互動(dòng)

在Frank Carter和團(tuán)隊(duì)的努力下，MelodyVR 與 Innovate Live一起設(shè)計(jì)了一種“舞臺入侵”效果，其中被選中的粉絲有機(jī)會與藝術(shù)家們一起虛擬地出現(xiàn)在舞臺上。

"想象一下，在舞臺背后的LED屏幕上顯示的一個(gè)巨大的多視角網(wǎng)格中，有150名粉絲正在進(jìn)行Zoom通話，"Williams說道。"人們通過家里的網(wǎng)絡(luò)攝像頭參與進(jìn)來，我們可以看到他們跳舞、與寵物坐在一起、喝酒、彈吉他，玩得很開心。”

"每隔一首歌，我們就能選擇一個(gè)人坐在'熱門座位'上。我們的想法是讓某個(gè)人在屏幕中間突然出現(xiàn)，與Frank進(jìn)行一對一的對話，他們可以點(diǎn)歌。因此，這是一個(gè)在巨大舞臺上進(jìn)行的Zoom通話，甚至Frank Carter的媽媽也曾出現(xiàn)在屏幕上。”

他繼續(xù)說道："我們必須在家庭用戶和Frank之間配置音頻延遲，以便使他們能夠正?；?dòng)并使一切保持同步。這需要大量的反復(fù)試驗(yàn)，雖然困難重重，但我們還是成功地在節(jié)目中實(shí)現(xiàn)了這一點(diǎn)。"

無論是6個(gè)"跳躍點(diǎn)"還是可供觀眾選擇的攝像機(jī)位置，都是4K流式傳輸。MelodyVR正在開發(fā)平鋪編碼，因此它只流式傳輸觀眾正在查看的那部分流。

"我們希望在實(shí)現(xiàn)高質(zhì)量用戶體驗(yàn)的同時(shí)獲得低比特率，這樣那些使用低互聯(lián)網(wǎng)帶寬的用戶就可以獲得4K及更高質(zhì)量的內(nèi)容，" Williams說道。"我們正在努力突破沉浸式視頻可能性的邊界"。

MelodyVR正在探索深度映射和6DoF，這樣在現(xiàn)場表演中，用戶就可以虛擬地在舞臺上走動(dòng)。

工作流的元素將使他們能夠在下一步制作8K VR。Williams表示："當(dāng)我們的相機(jī)系統(tǒng)確實(shí)提升到8K分辨率時(shí)，就能擁有8K兼容的硬件。"

MelodyVR的一位用戶對去年圣誕節(jié)前舉行的演出給予了不錯(cuò)的評價(jià)，其寫道："雖然它（通過VR觀看現(xiàn)場演出）永遠(yuǎn)不會擁有與在現(xiàn)場看樂隊(duì)表演那樣相同的原始能量，但在我們能夠再次回到現(xiàn)場之前，這套節(jié)目是一個(gè)很好的替代品。"

 MelodyVR或?qū)⑻魬?zhàn)Spotify

MelodyVR是一家AIM上市公司，成立至今已有5年，目前其估值為7400萬英鎊，該公司稱其是唯一獲得許可的VR音樂平臺。它還聲稱擁有世界上最大的沉浸式和互動(dòng)式音樂體驗(yàn)庫（約1800首曲目），這些曲目來自Post Malone、Kelly Clarkson、Fall Out Boy和The Chainsmokers等知名音樂人，并與O2 Telefónica和Facebook建立了合作伙伴關(guān)系。

圖源：MelodyVR

去年8月MelodyVR以7000萬美元收購了美國公司Rhapsody International，該公司擁有數(shù)字音樂先鋒品牌Napster。Rhapsody在2019年擁有108億個(gè)流媒體，收入為1.13億美元，其背后是每月向用戶收取9.99美元的無廣告訂閱模式。Napster在全球有300萬用戶，并擁有9000萬首授權(quán)曲目。

此舉使MelodyVR與Spotify和蘋果iTunes等公司形成了更直接的競爭。

MelodyVR首席執(zhí)行官兼執(zhí)行主席Anthony Matchett在一份聲明中說道：“ MelodyVR對Napster的收購意味著將沉浸式視覺內(nèi)容和音樂結(jié)合在一起的音樂娛樂平臺即將誕生。對于當(dāng)今的音樂迷來說，現(xiàn)場音樂和錄制音樂有著內(nèi)在的聯(lián)系。我們渴望看到喜歡的藝術(shù)家進(jìn)行現(xiàn)場表演，就像我們聆聽他們的專輯一樣。我們收購的Napster是音樂行業(yè)的翹楚之一，其可以無縫提供音頻和視頻媒體，這為提供真正的下一代音樂服務(wù)奠定了基礎(chǔ)。”

就像體育一樣，用VR直播現(xiàn)場音樂表演有效地消除了場地的容量限制，使無限數(shù)量的粉絲能夠在VR中觀看本該門票售罄的演出。在人們能親臨現(xiàn)場觀看音樂演出之前，VR已經(jīng)展現(xiàn)了更多潛力，并成為了一項(xiàng)收入來源。

原文鏈接：

https://www.ibc.org/trends/vr-gigs-point-to-the-future-of-live-music/7627.article