90%軽量化でも飛行可能?ControlNeXtでアイアンマンが美女ダンスを披露、指先まで正確な動き
賈佳亞チームが開発したControlNeXtは、AIモデルの使用方法を簡素化するオープンソースの画像/動画生成誘導ツールです。このツールはコンパクトで、SDXL、SD1.5などのStable Diffusionファミリーのモデルと互換性があり、エッジ誘導、姿勢制御、マスク、被写界深度制御など、複数の制御モードをサポートしています。その「ダイエットの秘訣」は、より効率的な構造を採用することであり、「大食い」制御ブランチを少量のResNetブロックで構成される「ライトミール」に置き換えることで、モデルのサイズを