概念NAR模型 / Non-Autoregressive Models
非自回归生成
一类文本生成方法,允许对整个序列同时或多轮修改,与自回归模型逐token生成不同,可实现并行解码或迭代精修,但推理时通常需要对全序列反复计算
时间轴 (近 90 天)
10月23日
非自回归生成模型假设各位置或各层级在一定程度上条件独立,从而可以一次性或分层并行地产出多个输出,但常因忽略token间依赖而损失流畅性。
待验证50%
一类文本生成方法,允许对整个序列同时或多轮修改,与自回归模型逐token生成不同,可实现并行解码或迭代精修,但推理时通常需要对全序列反复计算
非自回归生成模型假设各位置或各层级在一定程度上条件独立,从而可以一次性或分层并行地产出多个输出,但常因忽略token间依赖而损失流畅性。