Facebook最新HMC實(shí)時(shí)面捕VR頭顯可帶來照片級化身角色

　　為了提高虛擬現(xiàn)實(shí)體驗(yàn)的逼真度，F(xiàn)acebookReality Labs的研究人員開發(fā)了名為“Codec Avatars”的革命性系統(tǒng)。這個(gè)實(shí)時(shí)動(dòng)畫系統(tǒng)能夠逼真地將用戶及其動(dòng)作映射至虛擬角色，包括皮膚皺褶和面部表情等等。

　　Facebook研究科學(xué)家Shih-En Wei表示：“我們的研究證明，可以通過VR頭顯中的攝像頭來精確地制作照片級真實(shí)感的虛擬角色。”

　　延伸閱讀：Facebook 50年征途：Codec Avatars，創(chuàng)造逼真虛擬角色

　　據(jù)介紹，除了通過攝像頭進(jìn)行追蹤之外，基于對抗生成網(wǎng)絡(luò)(Generative Adversarial Networks;GAN)的人工智能技術(shù)將執(zhí)行一致的多視圖圖像樣式轉(zhuǎn)換，從而自動(dòng)將HMC紅外圖像轉(zhuǎn)換成逼真的虛擬角色圖像。

　　Shih-En Wei進(jìn)一步解釋說：“不僅只是稀疏的面部特征，利用每個(gè)像素和3D虛擬角色的渲染來比較這種轉(zhuǎn)換的圖像，我們能夠通過可微分渲染在精確映射攝像頭圖像和3D虛擬角色狀態(tài)之。在映射建立之后，我們訓(xùn)練神經(jīng)網(wǎng)絡(luò)實(shí)時(shí)地根據(jù)最小集攝像頭圖像預(yù)測面部參數(shù)。”

　　Facebook團(tuán)隊(duì)將于7月28日-8月1日舉行的SIGGRAPH 2019大會(huì)中展示他們的VR實(shí)時(shí)面部動(dòng)畫系統(tǒng)。SIGGRAPH 2019大會(huì)將于7月28日至8月1日在美國洛杉磯會(huì)展中心舉行。屆時(shí)Facebook Reality Labs團(tuán)隊(duì)將介紹他們的研究成果，同時(shí)展示實(shí)時(shí)面部動(dòng)畫系統(tǒng)。