AniPortrait: 音声と顔写真から高品質アニメーションを生成

テンセントは、音声と顔写真を使って高品質なアニメーションを生成するAniPortraitプロジェクトをオープンソース化しました。

このプロジェクトは、音声データを取り込み、それを2次元的な顔の輪郭に変換し、拡散モデルを使ってリアルで滑らかな顔のアニメーションを生成します。

実験結果によると、AniPortraitは顔の表現力、ポーズの多様性、視覚効果において優れた性能を示しています。

ユーザーは必要に応じて顔の動きを調整でき、実用性と面白さを高めることができます。

このプロジェクトは直接オープンソース化されており、ユーザーにとって非常に便利です。