[控场AI]
概念模型崩塌 / 模型崩溃

Model Collapse

机器学习领域的概念,指AI模型在训练数据中混入大量AI生成内容后,逐渐偏离真实人类数据分布,导致输出质量下降、多样性降低、同质化加剧的现象

核心事实

时间轴 (近 90 天)

9月1日

模型崩溃指AI模型使用前代模型生成数据训练后,经过多代迭代输出分布会逐渐偏离原始真实数据分布,丢失分布尾部信息

已验证80%
8月31日

能力退化现象(也称'模型坍缩')在用模型自身生成的合成数据进行微调时已被多次观察到

待验证50%
8月31日

2023年牛津大学等机构发表研究,实验中发现经过仅5-10代递归训练,模型输出质量就会出现肉眼可见的退化

待验证60%

全部知识事实 (5)

来源文章