CAP4D：参考画像をアップロードするだけで高品質な4Dキャラクタアバターを生成

最近、トロント大学とベクター研究所の研究チームが、CAP4Dモデルを発表しました。これは、変形多視点拡散モデル（MMDM）に基づく新しい技術で、任意の数の参照画像からリアルな4Dアバターを生成できます。このモデルは2段階の方法を採用しており、まずMMDMを使用して異なる視点と表情の画像を生成し、次にこれらの生成された画像と参照画像を組み合わせて、リアルタイムで制御可能な4Dアバターを再構築します。CAP4Dのワークフローでは、ユーザーは任意の数の参照画像を入力できます。