HeadGAP:三張視角圖片即可生成逼真3D虛擬人
字節跳動與上海科技大學的研究團隊開發了一項名爲“HeadGAP”的創新技術,僅通過三張不同視角的照片,即可快速生成高仿真、可動畫化的3D虛擬人頭部形象,並實現面部表情同步。研究過程中,團隊首先從大型多視角動態數據集中提取3D頭部先驗信息,用於個性化定製生成目標人物的虛擬頭像。採用基於高斯點雲的自解碼網絡和部分動態建模,結合反演和微調策略,高效實現高質量、多視角一致性頭像的個性化製作。該成果在虛擬社交、遊戲開發等領域有廣泛應用前景,實驗顯示生成的3D頭像在渲染質量和動畫效果上表現出色。