待验证50% 置信事实精确时间

在未训练模型上，BPB强烈偏好某些词表大小，即便模型准确率仍停留在随机水平。

1

来源数

50%

置信度

长期有效

时效性

2026/11/4

首次发现

来源

Tokenizer三大迷思：BPB指标真的可靠吗？

涉及实体

BPBconcept 未训练模型concept

相关事实

待验证模型在冷门话题上保持事实准确性比写出排序算法更能反映其知识密度和训练质量69% 相似待验证冻结特征加轻量推理头的组合能保留预训练模型的泛化能力并避免大规模微调成本。68% 相似待验证由于大模型输出具有随机性，评估实践中常采用模型打分（LLM-as-Judge）、人工标注或基于参考答案的语义相似度等方式68% 相似待验证在满足正确性前提下，MoE相对稠密模型的能耗优势比反复调解码参数更值得优先考虑。68% 相似待验证词向量初始为随机值，在训练过程中通过反向传播不断优化以表达Token的语义特征68% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/1134077

API

curl https://kongchang.com/api/v1/knowledge/claims/1134077

MCP

get_claim(id=1134077)