テンセントは、音声と顔写真を使って高品質なアニメーションを生成するAniPortraitプロジェクトをオープンソース化しました。
このプロジェクトは、音声データを取り込み、それを2次元的な顔の輪郭に変換し、拡散モデルを使ってリアルで滑らかな顔のアニメーションを生成します。
実験結果によると、AniPortraitは顔の表現力、ポーズの多様性、視覚効果において優れた性能を示しています。
ユーザーは必要に応じて顔の動きを調整でき、実用性と面白さを高めることができます。
このプロジェクトは直接オープンソース化されており、ユーザーにとって非常に便利です。