概念training-free text embedding
免训练文本嵌入
不微调模型参数、直接利用预训练语言模型中间隐藏状态或输出作为句子表示的文本嵌入方法,典型做法包括取最后一层token隐藏状态、平均池化或提示模板引导
时间轴 (近 90 天)
10月19日
现有免训练文本嵌入方法几乎只关注英语,多语言场景在很大程度上被忽视。
待验证50%
10月19日
免训练文本嵌入指不微调模型参数,直接利用预训练语言模型(如LLM)的中间隐藏状态或输出作为句子表示的方法。
待验证50%
10月19日
该工作首次系统性地揭示了多语言免训练文本嵌入中的语言条件化几何问题。
待验证50%