Meta 推出 MoCha AI 系統:可生成同步語音與動作的角色動畫
Meta 與滑鐵盧大學的研究團隊共同開發了一款名爲 MoCha 的人工智能系統,能夠生成包含同步語音和自然動作的完整角色動畫。這一創新突破不同於以往僅聚焦於面部的動畫生成模型,MoCha 可從多個攝像機角度渲染全身動作,涵蓋嘴脣同步、手勢表現,以及多個角色之間的互動。提高口型同步準確度MoCha 的演示重點展示了特寫鏡頭和半特寫鏡頭下的上身動作與手勢同步生成。該系統的獨特之處在於其引入的“語音-視頻窗口注意”機制,這一機制成功解決了長期以來困擾 AI 視頻生成的兩個主