Google DeepMind 提出了 DRaFT 算法,用于高效优化扩散模型。DRaFT 通过直接奖励微调方法,最大化可微的奖励函数。引入 DRaFT-K 和 DRaFT-LV 算法,提高效率并优于全反向传播。实验证明 DRaFT 在 Stable Diffusion1.4 上效率远超强化学习算法。DRaFT 是生成建模领域的有价值工具。