复旦、百度联手打造全新AI模型Hallo2 可生成4K超高清+1小时超长视频!
复旦大学和百度公司的研究人员联合开发了一种名为 Hallo2的全新 AI 模型,该模型可以生成长达数小时的4K 分辨率人物动画,并且可以通过语音和文字提示进行精准控制。一直以来,生成高质量的人物动画需要耗费大量的时间和人力成本。而 Hallo2的出现,有望彻底改变这一现状,为电影制作、虚拟助手、游戏开发等领域带来革命性的变化。Hallo2模型建立在 latent diffusion models 的基础上,并引入了一系列创新性的技术,包括:Patch-drop 数据增强技术:通过对运动帧进行随机遮挡,防止模型过度依