可控ODE生成模型

梯度引导可控生成

通过梯度优化实现预训练连续归一化流模型的可控生成，无需重新训练即可对生成内容进行精细控制。

Xingchao, Liu · Wu, Lemeng · Shujian, Zhang · Gong, Chengyue · Ping, Wei · Liu, Qiang

2023

参数信息

反向传播加速比

~90 %

技术优势

加速反向传播

通过非均匀离散化近似 ODE 轨迹，将直的部分合并为一个离散步骤，反向传播时间节省约 90%，误差可忽略。

无需重新训练

在冻结的预训练 ODE 生成模型上利用梯度优化即可实现可控生成，无需额外的训练或优化。

应用场景

• 文本引导图像编辑：用文本直接编辑图像，无需重新训练模型。
• 语义方向发现：在冻结模型中找语义方向，操控新图像。
• 生成模型控制：通过梯度优化精细控制生成内容。
• 连续归一化流：在预训练连续归一化流上实现可控生成。