虛擬現(xiàn)實雖然能產(chǎn)生逼真的體驗,但現(xiàn)在并不能做到與現(xiàn)實實時同步,比如讓虛擬人物反應(yīng)用戶的表情變化。
南加州大學(xué)的研究人員就和Oculus合作,研究出了一種可以跟蹤虛擬現(xiàn)實設(shè)備佩戴者臉部表情的方式,并將佩戴者的面部表情轉(zhuǎn)換成一個虛擬人物。這可以使社交、工作,甚至是在虛擬世界中游玩變的更有價值,因為設(shè)備中顯示的虛擬人物可以完美地模仿人類真實的表情。
這一過程是如何實現(xiàn)的呢?
該系統(tǒng)利用連接到頭戴設(shè)備的3D相機來追蹤佩戴者的嘴部動作。那么被佩戴的設(shè)備所遮擋住的面部表情該怎么監(jiān)測呢?原來是研究人員在設(shè)備與佩戴者面部接觸的填充泡沫中,放置了變形測量儀。再將兩個數(shù)據(jù)源相結(jié)合之后,佩戴者面部運動的精準(zhǔn)3D圖像將被用在一個虛擬人物動畫中。
這一技術(shù)的加入會使得虛擬世界的體驗和交互變得更加引人注目。Facebook首席執(zhí)行官馬克·扎克伯格(Mark Zuckerberg)曾表示,他有興趣讓 Oculus Rift 頭戴設(shè)備給社交體驗帶來新的方式,不過他并沒有透露任何細(xì)節(jié)。不過現(xiàn)在的效果還不太理想,如果用上圖中的表情去社交的話,感覺是在嚇人吧。
除了Oculus以外,虛擬現(xiàn)實的創(chuàng)業(yè)公司High Fidelity也正在研發(fā)此類技術(shù),該公司正在通過使用攝像頭和其他傳感器技術(shù)來追蹤佩戴者面部表情、胳膊和手勢,以便實現(xiàn)更加逼真的虛擬社交。
Oculus和南加州大學(xué)研發(fā)的系統(tǒng)的關(guān)鍵因素在于軟件,軟件可以結(jié)合傳感器追蹤的面部上部和下部的數(shù)據(jù),并將結(jié)果匹配成一個面部3D模型。
目前,該軟件需要用戶在第一次使用時經(jīng)過一個簡短的校準(zhǔn)過程。首先,用戶需要佩戴上只有3D攝像頭,而沒有虛擬現(xiàn)實顯示部分的設(shè)備,這樣設(shè)備就能收集到用戶完整面部的信息,用戶需要對著攝像頭持續(xù)做出10秒左右的“鬼臉”,讓設(shè)備記錄下用戶面部肌肉活動;之后,用戶佩戴上一整套完整的設(shè)備,同樣需要做出10秒鐘左右的“鬼臉”。校準(zhǔn)過程收集的數(shù)據(jù)可以幫助軟件計算出如何正確地匹配上下面部的數(shù)據(jù)流。
目前,這一項目只是一項研究,但有必要的話也可以很快使之成為一款商業(yè)化的產(chǎn)品。不過有一個問題,虛擬世界的目的之一就是逃避現(xiàn)實,如果一個人不自信,認(rèn)為自己長得不夠帥,是否會因為過于逼真的效果而放棄虛擬現(xiàn)實呢?