編譯/VR陀螺

近日，Meta公司申請(qǐng)的一項(xiàng)新專利展示了可能為電子游戲和VR應(yīng)用帶來(lái)更真實(shí)的唇部同步和面部動(dòng)畫(huà)的技術(shù)。創(chuàng)建具有這些更逼真的面部動(dòng)作的NPC和玩家虛擬化身，為包括VR游戲在內(nèi)的更真實(shí)、更有吸引力、更有沉浸感的游戲和體驗(yàn)打開(kāi)了新大門。

即使幾十年來(lái)電子游戲的圖形已經(jīng)取得了進(jìn)步，近年來(lái)允許開(kāi)發(fā)者創(chuàng)建近乎真實(shí)的虛擬角色，但為這些角色描繪真實(shí)的語(yǔ)言和面部表情對(duì)開(kāi)發(fā)者來(lái)說(shuō)仍然是個(gè)挑戰(zhàn)。玩家的大腦習(xí)慣于看到和閱讀其他人的臉，因此，即使是電子游戲的角色已經(jīng)配備了出色的面部動(dòng)畫(huà)，也很容易陷入恐怖谷效應(yīng)，導(dǎo)致角色看起來(lái) "不對(duì)勁"，甚至直接令人不安。Meta公司的專利可以允許即時(shí)生成逼真的唇語(yǔ)和面部表情，為開(kāi)發(fā)者節(jié)省時(shí)間，提高玩家的沉浸感。

圖源：Meta

該專利詳細(xì)介紹了將用戶的講話翻譯成逼真的唇語(yǔ)和面部動(dòng)畫(huà)的各種方法，使開(kāi)發(fā)者在選擇使用該系統(tǒng)時(shí)具有靈活性。專利中概述的一種方法涉及使用一個(gè)音頻和視頻記錄的數(shù)據(jù)集，當(dāng)他們閱讀50個(gè)不同的語(yǔ)音平衡句子時(shí)，系統(tǒng)會(huì)跟蹤他們閱讀每一個(gè)句子時(shí)的面部表情。通過(guò)跟蹤個(gè)人在閱讀每句話時(shí)臉部和嘴部的動(dòng)作，該系統(tǒng)可以從這些動(dòng)作中提取信息，并將它們?nèi)诤显谝黄?，以逼真地制作出一個(gè)角色的動(dòng)畫(huà)，甚至包括眨眼和揚(yáng)眉等細(xì)微動(dòng)作。

除了能夠根據(jù)現(xiàn)有數(shù)據(jù)集生成面部動(dòng)畫(huà)和唇語(yǔ)之外，該專利還描述了該系統(tǒng)如何利用集成在VR頭顯中的攝像頭做同樣的事情。這一功能可以讓VR用戶擁有準(zhǔn)確模仿自己面部表情的虛擬化身，從而在多人游戲和VR聊天等社交VR體驗(yàn)中獲得更真實(shí)和沉浸的體驗(yàn)。

從Valve的Source引擎使用動(dòng)畫(huà)系統(tǒng)為對(duì)話中的每個(gè)音素（組成單詞的單個(gè)聲音）建立面部動(dòng)作模型，到Team Bondi使用MotionScan技術(shù)用32個(gè)高清攝像機(jī)系統(tǒng)捕捉《黑色海岸》的演員表演，開(kāi)發(fā)者們始終在努力為游戲創(chuàng)造真實(shí)的面孔。Meta公司的專利可能會(huì)為在這一探索提供巨大的技術(shù)飛躍，并可能有助于在游戲和VR體驗(yàn)中開(kāi)創(chuàng)一個(gè)高質(zhì)量、逼真的面部動(dòng)畫(huà)的新時(shí)代。

來(lái)源：gamerant