Classifier-Free Guidance

负向提示词包含过多token时，每个token在交叉注意力计算中分到的权重被稀释，导致单个约束的实际抑制效力大幅下降

无分类器引导（Classifier-Free Guidance, CFG）的核心思想由Jonathan Ho和Tim Salimans在2022年提出

扩散模型可通过引导（Guidance）机制实现可控生成，类似图像扩散中的Classifier-Free Guidance，无需重新训练模型

Classifier-Free Guidance（CFG）是扩散模型与流匹配模型中最主流的引导技术之一，训练时以一定概率丢弃条件，采样时通过公式将条件与无条件预测相减并放大引导强度。

在TI2I流匹配任务中，CFG应用于流模型的噪声阶段（早期流步骤）时会削弱模型对编辑指令的跟随能力，而非提升质量。

在TI2I中，CFG只在文本条件上做放大，等价于单方面增强'改变'方向，却没有保护'保持'的机制，从而系统性侵蚀图像条件的约束力。

该研究提出在早期流步骤中对CFG进行修正：在噪声阶段降低或重新加权CFG影响，随后逐步恢复标准CFG，该方法不需要重新训练模型也不增加推理成本，完全在采样阶段完成。

修正后的CFG方法在像素空间和潜在空间两种主流TI2I流匹配范式上均得到验证，在指令跟随和编辑可控性上有显著提升，同时保持高质量生成结果。

流匹配的'噪声阶段'或'早期流步骤'指积分刚开始、t接近0、样本仍是接近纯噪声的那几步，此阶段图像结构信息尚未成形，正是CFG行为发生反常的时间窗口。

CFG使用采样时需要两次前向计算，并会牺牲一定的多样性。

对于TI2I这类需要平衡多种条件的任务，盲目套用生成任务的引导策略可能不是最优解。

在纯文本到图像生成任务中不存在需要保留的源图像，因此CFG放大文本引导的副作用不会显现；而在TI2I中该副作用会损害指令跟随精确性与编辑可控性。

分类器自由引导（CFG）用无条件预测充当弱信号，而 autoguidance 用弱模型充当弱信号

Classifier-Free Guidance技术由Jonathan Ho和Tim Salimans于2022年提出，允许模型在推理时通过调节引导强度参数平衡生成图像的多样性和与文本提示的一致性

Classifier-Free Guidance技术允许模型调整遵循提示词的程度，引导强度越高结果越贴近文字描述，但过高会导致色彩过饱和、细节失真

CFG推理时分别进行有条件预测和无条件预测，通过公式output = uncond + guidance_scale × (cond - uncond)进行插值放大，代价是每步需要两次前向传播

负面指令起到类似分类器自由引导（Classifier-Free Guidance）的作用，显式压低某些输出模式的概率

在Classifier-Free Guidance机制中，模型会计算基于正面提示词和负面提示词的两个方向预测，最终生成方向在两者之间做加权插值

扩散模型在去噪过程中会将负面提示词对应的语义向量作为反向引导信号，这种机制被称为Classifier-Free Guidance的负向条件

未来可能需要更多针对特定任务的自适应引导机制，例如时间步敏感的CFG调度策略或动态感知条件冲突的引导方法。