文 | VR陀螺 云吞

一個(gè)沒(méi)有freestyle的小姐姐

隨著VR在今年逐漸回歸理性，線(xiàn)下體驗(yàn)的新形態(tài)——大空間多人交互正逐漸開(kāi)始奪人眼球。國(guó)外的The Void、Zero Latency等VR主題樂(lè)園把大空間作為了很突出的、甚至是就一個(gè)的賣(mài)點(diǎn)；國(guó)內(nèi)的SoReal、星核等也都配備了大空間的體驗(yàn)。 實(shí)現(xiàn)大空間里的多人交互，自然就離不開(kāi)全身動(dòng)作捕捉技術(shù)。近日，VR陀螺走訪(fǎng)了光學(xué)動(dòng)捕方案提供商青瞳視覺(jué)，進(jìn)一步了解公司的發(fā)展情況和技術(shù)的應(yīng)用前景。 VR占業(yè)務(wù)一半，已實(shí)現(xiàn)盈利 與尋常位于寫(xiě)字樓里的公司不同，青瞳視覺(jué)落戶(hù)在鳥(niǎo)語(yǔ)書(shū)香的上海大學(xué)校園內(nèi)。這樣的選擇自然也是經(jīng)過(guò)考量的——據(jù)CEO張海威介紹，公司和上海大學(xué)，尤其是通信學(xué)院、影視學(xué)院及環(huán)上大影視基地有著深度合作。 雖然全身動(dòng)捕一般用于影視拍攝比較多，但對(duì)于起步不久的青瞳視覺(jué)來(lái)說(shuō)，近兩年火爆的VR概念卻給公司帶來(lái)了新的機(jī)遇。 “目前很主要的業(yè)務(wù)就是在VR，這塊占了一半，” 張海威說(shuō)。 青瞳目前專(zhuān)注于光學(xué)動(dòng)捕，即采用多臺(tái)紅外線(xiàn)相機(jī)來(lái)對(duì)身上佩戴了Marker（標(biāo)記點(diǎn)）的人體的全身動(dòng)作進(jìn)行捕捉。在VR中，青瞳以大空間動(dòng)捕的設(shè)備為基礎(chǔ)，整合了一系列方案，可以實(shí)現(xiàn)多人的實(shí)時(shí)交互。 “大空間給了游戲一個(gè)更復(fù)雜的交互的手段，能夠讓場(chǎng)景變得更大，參與的人更多，可交互的道具更多。它能夠提升VR整個(gè)的質(zhì)量，同時(shí)也可以向下——用戶(hù)也可以玩很簡(jiǎn)單的游戲。所以大空間可高可低。但是真正很適合大空間的，在我看來(lái)，還是樂(lè)園式的體驗(yàn)。” 選定了VR線(xiàn)下娛樂(lè)作為主要的發(fā)展領(lǐng)域后，青瞳也將業(yè)務(wù)的中心放在了和VR內(nèi)容供應(yīng)商，即CP的不斷磨合上。 張海威說(shuō)，公司去年很大一部分工作就是在和CP們進(jìn)行合作。大空間多人游戲的開(kāi)發(fā)相對(duì)而言比較特殊，不僅要在游戲設(shè)計(jì)上規(guī)劃好思路，還要使用動(dòng)捕公司特定的設(shè)備進(jìn)行開(kāi)發(fā)。 青瞳本身也不僅僅提供技術(shù)。在游戲開(kāi)發(fā)過(guò)程中，公司就會(huì)給出很多設(shè)計(jì)和策劃上的建議，幫助CP避開(kāi)大空間開(kāi)發(fā)的坑；內(nèi)容產(chǎn)出后，公司也會(huì)運(yùn)用自己的資源來(lái)推動(dòng)內(nèi)容的銷(xiāo)售。 目前，青瞳有多個(gè)針對(duì)線(xiàn)下體驗(yàn)店的方案，其中50平米和100平米是兩個(gè)標(biāo)準(zhǔn)的方案。標(biāo)準(zhǔn)的設(shè)立方便了游戲設(shè)計(jì)的模塊化思路，得以讓公司在開(kāi)發(fā)過(guò)程中做出比較快的適應(yīng)。 VR上的需求，也讓青瞳實(shí)現(xiàn)了比較微薄的盈利。但張海威也談到，公司需要不停地研發(fā)新的硬件，相對(duì)比較燒錢(qián)。 2012年開(kāi)始研究動(dòng)捕算法，已落地一批線(xiàn)下體驗(yàn)店 事實(shí)上，國(guó)內(nèi)外有不少專(zhuān)注于開(kāi)發(fā)全身動(dòng)捕技術(shù)的企業(yè)，比如國(guó)外的OptiTrack、Vicon，國(guó)內(nèi)的諾亦騰、瑞立視、ZVR等。不約而同的，這些企業(yè)都將VR中的大空間動(dòng)捕作為非常重要的業(yè)務(wù)領(lǐng)域。 面對(duì)激烈的競(jìng)爭(zhēng)，剛剛成立兩年的青瞳視覺(jué)成績(jī)?nèi)绾危?“核心團(tuán)隊(duì)12年就開(kāi)始進(jìn)行動(dòng)捕算法的相關(guān)研究了。VR現(xiàn)在還處于一個(gè)相對(duì)早期的階段，青瞳現(xiàn)在關(guān)注的是如何把事情做好做踏實(shí)了。具體到成績(jī)，成立不到兩年先后推出3款系列的相機(jī)，完成了剛體定位、全身動(dòng)捕、表情捕捉、光慣混合等一系列算法的研發(fā)。在產(chǎn)品銷(xiāo)售上也有大量的落地案例，成立不到一年就已經(jīng)實(shí)現(xiàn)盈利。” 張海威所指的落地，也就是合作方。他表示，奧英、SoReal、超級(jí)隊(duì)長(zhǎng)、舉佳爽、星核等都已經(jīng)開(kāi)始采用青瞳的產(chǎn)品。CP方面，則有ifgames、克一、鄭州幻視、銳瞳、境宇、海豚游戲、空島科技等。除了公司所在的上海周邊外，青瞳在北京也有十幾個(gè)客戶(hù)，合作的CP也有5、6個(gè)。 近日，青瞳和奧英聯(lián)合發(fā)起“黑洞計(jì)劃”，將聯(lián)手眾多CP一起推出打包好的大空間體驗(yàn)內(nèi)容，進(jìn)一步將市場(chǎng)鋪開(kāi)。 這是青瞳在市場(chǎng)營(yíng)銷(xiāo)方面一次做出如此大的動(dòng)作。作為一家技術(shù)為導(dǎo)向、90%以上員工都是技術(shù)研發(fā)人員的企業(yè)來(lái)說(shuō)，青瞳的大部分精力都投入了相機(jī)和算法無(wú)止境的優(yōu)化和迭代中。 全身動(dòng)捕的技術(shù)門(mén)檻自然是極高的。張海威本人畢業(yè)于中科院自動(dòng)化所，主要負(fù)責(zé)算法的研發(fā)。團(tuán)隊(duì)中絕大部分人才來(lái)自交大、電子科大、廈大等，也不乏有工作經(jīng)驗(yàn)長(zhǎng)達(dá)20多年的“老兵”。 目前青瞳一共有三款產(chǎn)品，分別針對(duì)高、中、低三個(gè)市場(chǎng)。很高端的相機(jī)，甚至可以直接在機(jī)內(nèi)進(jìn)行計(jì)算。 對(duì)于動(dòng)捕系統(tǒng)中的相機(jī)來(lái)說(shuō)，拍攝角度的大小和距離的長(zhǎng)短總是難以尋找一個(gè)平衡點(diǎn)。視場(chǎng)角大的相機(jī)，拍攝的距離就相對(duì)較短；拍攝距離長(zhǎng)，視場(chǎng)角又太小。 青瞳的相機(jī)很大拍攝距離可以達(dá)到15米，視場(chǎng)角在90度左右。相比之下，國(guó)外產(chǎn)品，如OptiTrack，視場(chǎng)角為70度左右，追蹤距離只有6米遠(yuǎn)。 當(dāng)然，張海威也提到，大視場(chǎng)角也有至少三個(gè)弊端需要算法去克服：一，國(guó)外產(chǎn)品的鏡頭畸變非常小所以視場(chǎng)角小，青瞳的相機(jī)為了取得大視場(chǎng)角因此畸變系數(shù)比較大，就需要用后期的算法進(jìn)行校正和處理；二，視場(chǎng)角大，包含的東西就會(huì)多，處理的數(shù)據(jù)量也會(huì)大很多；三，視場(chǎng)角大了之后，有效像素變少了。同樣的分辨率看的東西更廣了，像素也就變少了，變相的讓分辨率降低了，同時(shí)又增加了圖像處理的要求。 對(duì)于所有的光學(xué)動(dòng)捕方案提供商來(lái)說(shuō)，目標(biāo)很是明確：用很少的相機(jī)，在空間里取得很好的效果。 青瞳目前做過(guò)很大的空間達(dá)到200平米。張海威表示，一般來(lái)說(shuō)，50平米空間的大小建議安裝8-12個(gè)相機(jī)。但每個(gè)空間里相機(jī)具體的布置還是需要根據(jù)實(shí)際情況來(lái)設(shè)計(jì)。 “有的空間小拐角多，就要增加相機(jī)。有的場(chǎng)地層高較高，相機(jī)可以覆蓋的面積就大，反之亦然。有的時(shí)候游戲需要的交互多，需要的相機(jī)也就多。墻多的場(chǎng)地，需要的相機(jī)也會(huì)多。有的場(chǎng)地大，但是里面的人少，相機(jī)也就可以少。” 醫(yī)療、體育、軍事領(lǐng)域有剛需 目前我們所接觸到的全身動(dòng)捕大致可分為慣性動(dòng)捕和光學(xué)動(dòng)捕兩類(lèi)。與光學(xué)動(dòng)捕這樣需要配合外部相機(jī)使用不同，慣性動(dòng)捕只需要人穿上綴滿(mǎn)加速度計(jì)和陀螺儀的“衣服”就可以進(jìn)行位置的計(jì)算。 張海威談到，兩種動(dòng)捕方式各有優(yōu)劣。比如，VR中就無(wú)法單一使用慣捕，因?yàn)閼T捕容易受到電磁、金屬的影響，在腳離開(kāi)地面的情況下也無(wú)法做出準(zhǔn)確的測(cè)算。同時(shí)慣捕需要計(jì)算17個(gè)節(jié)點(diǎn)的數(shù)據(jù)量，在多人的情況下還需要無(wú)線(xiàn)降頻傳輸。而慣捕的好處當(dāng)然就是使用簡(jiǎn)單，無(wú)需搭建相機(jī)和場(chǎng)地，隨時(shí)隨地都可以使用，而且這個(gè)技術(shù)在電影拍攝等場(chǎng)景中已經(jīng)應(yīng)用得非常嫻熟。 而光捕定位雖然很準(zhǔn)度很高，可達(dá)亞毫米級(jí)，但會(huì)有光線(xiàn)受遮擋、在強(qiáng)光線(xiàn)下無(wú)法使用的問(wèn)題。因此公司會(huì)將慣捕和光捕混合在一起使用，在光線(xiàn)被遮擋的情況下，通過(guò)慣捕推算位置。 極高的很準(zhǔn)度也讓光捕的可用武之地大大增加。張海威便談到了醫(yī)療領(lǐng)域的應(yīng)用。光捕用到的球體marker較小，可以放置在手術(shù)刀上，然后就可以在不把人完全切開(kāi)的情況下，對(duì)人體內(nèi)的手術(shù)刀進(jìn)行定位，減小對(duì)病人的傷害。在腦部手術(shù)中，時(shí)常需要進(jìn)行亞毫米級(jí)的定位，也能夠用上光捕技術(shù)。除了手術(shù)，在運(yùn)動(dòng)疾病的康復(fù)中，也可使用光捕分析病情、再生成治療方案。 實(shí)際上，步態(tài)分析、醫(yī)療康復(fù)這個(gè)領(lǐng)域本身已經(jīng)比較成熟，國(guó)外的醫(yī)院已經(jīng)很多用到了光捕的產(chǎn)品。但由于醫(yī)療器械監(jiān)管較嚴(yán)，青瞳的產(chǎn)品目前還需要經(jīng)歷臨床驗(yàn)證階段，隨后才能在醫(yī)院鋪開(kāi)。 在同樣的道理下，光捕在體育、軍事領(lǐng)域也有著很好的應(yīng)用場(chǎng)景，可以幫助分析運(yùn)動(dòng)員和士兵的訓(xùn)練情況、康復(fù)情況。比如，位于上海體育學(xué)院的乒乓球國(guó)家隊(duì)的訓(xùn)練基地就采用了青瞳的設(shè)備，來(lái)采集運(yùn)動(dòng)員的身體數(shù)據(jù)。把光捕設(shè)備穿在運(yùn)動(dòng)員和球拍上，可以很準(zhǔn)算出骨骼的長(zhǎng)度和角度。再加上測(cè)力臺(tái)，就可以分析出關(guān)節(jié)哪個(gè)地方容易受傷，以及受傷之后恢復(fù)的情況。 張海威也表示，由于以上這些領(lǐng)域的剛需，青瞳接下來(lái)也會(huì)力爭(zhēng)打開(kāi)這些能夠真正產(chǎn)生價(jià)值的市場(chǎng)、形成落地。 結(jié)語(yǔ)：技術(shù)是不敗的秘訣 從電影到VR，再到醫(yī)療、體育，我們可以預(yù)見(jiàn)，動(dòng)作捕捉技術(shù)將步入高速發(fā)展的軌道，讓我們的生活更加豐富、便捷。 在很后問(wèn)到張海威對(duì)自己在這半年如何評(píng)價(jià)時(shí)，他很誠(chéng)懇的表示對(duì)自己“不太滿(mǎn)意”，因?yàn)榛ㄔ跔I(yíng)銷(xiāo)和資本上的精力太少了。而VR陀螺認(rèn)為，這也側(cè)面展示出掌握核心技術(shù)企業(yè)的優(yōu)勢(shì)：只要打磨好產(chǎn)品，自然會(huì)有用戶(hù)被吸引而來(lái)，也會(huì)有多個(gè)領(lǐng)域?yàn)橹ㄩ_(kāi)大門(mén)。 關(guān)注微信公眾號(hào)：VR陀螺（vrtuoluo）,定時(shí)推送，VR/AR行業(yè)干貨分享、爆料揭秘、互動(dòng)精彩多。