編譯/VR陀螺
近日,來(lái)自浙江大學(xué)、ReLER實(shí)驗(yàn)室、 CCAI的研究人員公布了突破性框架Human101(arXiv:2312.15258)的研發(fā)進(jìn)展,該研究旨在突破渲染速度和模型保真度的限制,從有限的數(shù)據(jù)源(如單視圖視頻)中構(gòu)建動(dòng)態(tài)、高保真的數(shù)字人類。
據(jù)悉,Human101的關(guān)鍵在于其將3D高斯展開(kāi)與先進(jìn)的動(dòng)畫技術(shù)相結(jié)合,利用了一種新穎的以人為中心的前向高斯動(dòng)畫方法和初始化技術(shù),避免了對(duì)目標(biāo)位姿點(diǎn)對(duì)應(yīng)規(guī)范點(diǎn)的窮舉搜索,直接將規(guī)范點(diǎn)變形到觀察空間中,簡(jiǎn)化了變形過(guò)程,提高了渲染速度,有助于高效處理單視圖視頻數(shù)據(jù),顯著加快了模型的收斂性,可快速重建3D數(shù)字人,并確保生成的模型具有高保真度。
圖源:Human101
研究數(shù)據(jù)顯示,與現(xiàn)有方法相比,Human101渲染速度超過(guò)100 FPS,渲染時(shí)間大大減少,這為實(shí)時(shí)交互式應(yīng)用程序和身臨其境的虛擬現(xiàn)實(shí)體驗(yàn)開(kāi)辟了新的可能性。并且該框架在許多情況下超越了此前方法的視覺(jué)保真度,不會(huì)以犧牲模型質(zhì)量為代價(jià)。
來(lái)源:marktechpost
投稿/爆料:tougao@youxituoluo.com
稿件/商務(wù)合作: 六六(微信 13138755620)
加入行業(yè)交流群:六六(微信 13138755620)
元宇宙數(shù)字產(chǎn)業(yè)服務(wù)平臺(tái)
下載「陀螺科技」APP,獲取前沿深度元宇宙訊息