腾讯出品!StereoCrafter:输入2D视频转3D视频效果
近日,腾讯 AI 实验室与腾讯 PCG 的 ARC 实验室联合推出了一种名为 StereoCrafter 的新框架,该框架可以将普通的2D 视频转换为高保真的立体3D 视频。这一创新响应了对3D 内容日益增长的需求,尤其是在沉浸式体验领域。StereoCrafter 充分利用了基础模型的优势,克服了传统转换方法的局限,显著提升了生成效果,确保生成内容能够满足各种显示设备的高保真要求。该系统的核心分为两个主要步骤。第一步是基于深度信息的视频重新贴图,提取遮挡信息的同时进行视频变换;第二步则是立体视频的