全新視頻生成框架SkyReels-A2發佈:可控視頻生成技術再創新高度
最近,Skywork AI 的研究團隊推出了一種名爲 SkyReels-A2的全新視頻生成框架,標誌着可控視頻生成技術的新高度。這個名爲 “元素到視頻(E2V)” 的框架可以根據文本提示,將各種視覺元素(如角色、物體、背景)合成自然的視頻,並且能夠與參考圖像保持高度一致。SkyReels-A2的核心在於其複雜的數據處理流程。研究團隊設計了一條全面的數據構建管道,以生成包含提示、參考圖像和視頻的三元組,從而爲模型訓練提供數據支持。其生成過程通過兩個分支進行:空間特徵分支和語義特徵分支。空