阿里新AI技术框架 Animate3D:可将任何3D模型动画化
文章介绍了名为Animate3D的创新性框架,该框架专为静态3D模型的动画制作设计。结合MV-VDM和4D-SDS技术,在MV-Video大规模数据集上训练,Animate3D通过时空注意力模块增强空间与时间一致性。此框架使用多视图渲染静态模型作为条件,保持其在动画中的身份,实现从多视图视频的直接动作重建到细节细化的两阶段动画化流程。验证实验显示其在性能上优于现有方法,公开发布数据、代码和模型。这项技术对于AR/VR、游戏和电影产业具有重大意义,不仅能加速创意内容生产,还将推动3D内容的广泛应用,促进创意产业的创新发展。