Adobe、AIサウンドエフェクト生成システム「MultiFoley」を発表　テキストプロンプトで動画と同期したサウンドを作成

最近、Adobeリサーチチームとミシガン大学の研究者らが共同で、映画や動画のサウンドエフェクトを生成するAIシステム「MultiFoley」を開発しました。このシステムは、ポストプロダクションを支援します。MultiFoleyの革新的な点は、テキストプロンプト、参照オーディオ、またはビデオサンプルを使用してサウンドエフェクトを作成できる点です。デモでは、猫の鳴き声をライオンの咆哮に変換したり、タイプライターの音をピアノの音符に変換したり、動画と完璧に同期させることに成功しています。