通義大モデルがOmniAudioを発表 - 360°ビデオから空間オーディオを生成
先ごろ、通義実験室の音声チームは空間オーディオ生成分野で画期的な成果を収め、OmniAudio技術を導入しました。この技術は、360°ビデオからFOA(ファーストオーダーAmbisonics)オーディオを直接生成でき、バーチャルリアリティや没入型エンターテイメントに新しい可能性をもたらします。空間オーディオはリアルな聴覚環境をシミュレートする技術であり、没入感を高めますが、従来の技術はほとんどの場合、固定視点のビデオに基づいており、360°パノラマビデオの空間情報が十分活用されていません。伝統的なビデオからオーディオ生成