待验证50% 置信事实精确时间
向量量化（VQ）将一组权重整体映射到预先学习好的码本中最近邻的码字上，只存储码字索引
1
来源数
50%
置信度
长期有效
时效性
2026/10/8
首次发现
来源
涉及实体
相关事实
待验证自注意力通过将输入序列映射为查询Q、键K、值V三组向量，计算Q与K的点积相似度后经Softmax归一化得到注意力权重，再加权汇聚V向量70% 相似待验证Qwen通过N-gram嵌入在输入阶段为短语级token组合建立专门的查找表，集中在模型前端的一个大型查找层67% 相似待验证QSA中C4块指每4个相邻Token被组织为一个计算单元，注意力选择在块级别进行而非Token级别65% 相似待验证该RAG项目将每个FAQ提取为独立的Q&A对作为完整语义单元进行向量化，而非采用固定大小分块64% 相似待验证倒排乘积量化（IVFPQ）在PQ基础上引入倒排索引结构，通过聚类将向量库分区，将检索复杂度从线性降低至亚线性64% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/988394API
curl https://kongchang.com/api/v1/knowledge/claims/988394MCP
get_claim(id=988394)