近日,專業CG特效公司Ziva Dynamics公布了最新的技術演示,在技術演示中,Ziva Dynamics展示了利用虛幻5實時進行高精度面部動作識別的效果。
據悉,雖然Ziva Dynamics利用了虛幻5完成演示的制作,但這僅僅是因為虛幻5在寫實渲染上的便捷性,實際進行面部動作捕捉的是Ziva Dynamics推出的組件ZRT Face Trainer。
CG與真人對比圖
ZRT Face Trainer是一個基于AI(機器學習)的云端面部表情組件,通過這一組件開發者能夠在游戲或影視作品中植入極其逼真的虛擬形象,從而解決當前虛擬形象開發的成本與自然感問題。
多年前,Ziva Dynamics就已經在對動作捕捉的高保真渲染方面進行研究,在生物骨骼與肌肉動作方面有相當豐富的經驗積累,并存在大量的訓練數據。
ZRT Face Trainer技術示意
深厚的經驗使得ZRT Face Trainer能夠實現對人臉動作的實時捕捉,并同時完成極為細致的還原。
根據Ziva Dynamics官方提供的數據,ZRT Face Trainer當前只需要一個小時的時間就能夠將任何靜態的面部網格,轉化為高性能的實時面部捕捉系統。
這套面部捕捉系統算法基于15T的4D掃描數據訓練,能夠提供超過7.2萬種表情的模擬,并且運行時的消耗極低,能夠達到3毫秒/幀的刷新率。
快科技