概念Semantic Collapse
语义坍缩
文本脱离上下文后语义信息丢失的现象,指文本在切分过程中丢失结构信息(如标题、层级),导致嵌入向量坍缩、语义坐标向公共吸引子塌陷
时间轴 (近 90 天)
10月13日
当文本脱离其原始结构上下文后,其语义会发生坍缩,表现为本应可区分的文本在嵌入空间中获得几乎相同的向量
待验证50%
10月13日
语义坍缩发生在文本被编码为向量之前,因此更换更强的embedding模型通常无法修复这类由上下文丢失导致的检索bug
待验证50%
文本脱离上下文后语义信息丢失的现象,指文本在切分过程中丢失结构信息(如标题、层级),导致嵌入向量坍缩、语义坐标向公共吸引子塌陷
当文本脱离其原始结构上下文后,其语义会发生坍缩,表现为本应可区分的文本在嵌入空间中获得几乎相同的向量
语义坍缩发生在文本被编码为向量之前,因此更换更强的embedding模型通常无法修复这类由上下文丢失导致的检索bug