阿里巴巴通義實驗室與中國科學技術大學聯合開源Fun-CineForge項目,針對影視配音中口型同步、音色遷移和情感表達等難題,提供端到端生產流水線和大模型解決方案,旨在解決傳統AI配音口型不匹配、情感生硬及難以適應複雜場景的問題。
阿里通義實驗室發佈並開源了Fun-CineForge模型,旨在解決AI配音中的口型不同步、情感缺失及多角色音色不一致等問題。該模型創新引入“時間模態”概念,通過精準時間戳控制,確保語音與畫面同步,並同步開放高質量數據集構建方法。
阿里通義實驗室發佈並開源全球首個支持影視級、多場景配音的多模態大模型Fun-CineForge,旨在突破AI配音在情感表達、環境音融合及口型同步等方面的技術瓶頸,推動影視行業配音環節的智能化變革。
通義實驗室發佈開源多模態大模型Fun-CineForge,旨在解決傳統AI配音在影視動畫中情緒表達和口型同步不足的問題。該模型突破聲畫脫節瓶頸,專注於實現合成語音與畫面脣部運動的高度匹配,提升配音真實感。
在線免費AI口型同步生成器,無需註冊無水印,照片視頻可開口說話
veo 4 是一款支持 4K 分辨率、原生音頻同步及角色一致性的生成式 AI 視頻製作工具。
由Dzine推出的AI動畫代理工具,支持從創意構思到成品製作的全流程動畫生成。
開源AI模型,用單張照片生成口型同步說話視頻,免費在線體驗。
Alibaba
-
輸入tokens/百萬
輸出tokens/百萬
上下文長度
Baidu
Moonshot
$10
$30
131
Flyworks MCP是一個免費快速的零樣本唇形同步工具,通過API接口實現數字人視頻與音頻的自動對口型,支持多種風格的數字形象。