概念Text Representation
文本表征
在自然语言处理中,将文本(词、子词或句子)映射为高维向量空间中稠密向量的表示形式。这些向量通过几何关系编码语义和语法信息,使模型能够对数值结构执行矩阵运算与注意力聚合,而非直接处理原始文本。
时间轴 (近 90 天)
10月14日
LLM操作的是文本的数值化表征而非像人类那样逐字阅读原文,因此风格层面的信息(语气、修辞、版权标记)在向量化过程中大多被稀释。
待验证50%
在自然语言处理中,将文本(词、子词或句子)映射为高维向量空间中稠密向量的表示形式。这些向量通过几何关系编码语义和语法信息,使模型能够对数值结构执行矩阵运算与注意力聚合,而非直接处理原始文本。
LLM操作的是文本的数值化表征而非像人类那样逐字阅读原文,因此风格层面的信息(语气、修辞、版权标记)在向量化过程中大多被稀释。