欢迎来到【AI日报】栏目!这里是你每天探索人工智能世界的指南,每天我们为你呈现AI领域的热点内容,聚焦开发者,助你洞悉技术趋势、了解创新AI产品应用。新鲜AI产品点击了解:https://top.aibase.com/1、数字人起飞!未来如何有效评估AI性能将成为重要挑战。
还记得月初刚发布时就让大家惊艳不已的字节新项目Loopy吗?这个让数字人声音完美匹配画面还匹配表情和情绪的对口型项目已经正式在即梦上线了。AIbase体验了一下,效果非常不错,可以说是目前支持中文效果最好的对口型服务了。以往,对口型视频往往存在一个通病,那就是看似嘴型对上了,但总感觉这个声音不是他发出来的,以至于大家看对口型视频的时候,会有一种割裂感。字节跳动和浙江大学的科研团队联合开发的基于音频驱动的视频扩散模型LOOPY完美解决了这个问题。不同于以
LOOPY技术,由字节跳动与浙江大学联合研发,是一种基于音频驱动的视频扩散模型,旨在解决虚拟形象生成时声音与画面割裂的问题。该技术仅需一帧图像和音频输入,就能生成逼真、动态且符合音频节奏与情感的虚拟形象动作,包括非语音动作、情绪驱动的眉毛和眼睛运动以及自然的头部运动。LOOPY的核心是其独特的长期运动信息捕捉模块,支持多种视觉和音频风格,为虚拟形象的动态效果注入了前所未有的活力。该技术不仅在自然度上超越现有模型,在处理侧面肖像时也表现出色,为游戏、电影制作、虚拟现实等领域提供了更高质量、高真实度的虚拟形象生成,极大提升了用户体验。LOOPY的灵活性和表现力,为创作者提供了无限的想象空间,预示着虚拟形象技术发展的新标杆。
["Loopy 和玲娜贝儿成为热门二次创作 IP","小红书博主使用 AI 绘画生成了蓝色的 Loopy","赞藏数过万,评论超过 2000 条","Loopy 和玲娜贝儿的二次创作存在侵权风险","创作者应尊重版权和法律规定"]
Loopy,仅凭音频驱动肖像头像,实现逼真动态。