待验证50% 置信基准精确时间

LCT相比BPE、Unigram、parity-aware BPE，在四个多语言下游基准上的聚合得分分别提升1.48、1.83和2.00分。

1

来源数

50%

置信度

长期有效

时效性

2026/10/13

首次发现

来源

Latent Core Tokenizer：压缩率不等于表征质量，多语言分词的新思路

涉及实体

Latent Core Tokenizermodel BPEconcept Unigramconcept parity-aware BPEconcept

相关事实

待验证GPT-4o 与 Qwen 2.5 Coder 32B 在 DataBugBench 中并列第二，均为4/5，准确率80%61% 相似待验证表现最佳的Edu-QuRater在还原留出集的GPT-4.1-mini成对判断时平均准确率达到0.91761% 相似待验证在HLE基准测试中，COMED将GPT-5.5的表现从23.1%提升到28.1%60% 相似待验证Llama 3.1 405B在MMLU上的得分已接近GPT-4o的水平，Qwen 2.5 72B在数学和代码生成基准上某些指标超越了GPT-4 Turbo60% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/1013333

API

curl https://kongchang.com/api/v1/knowledge/claims/1013333

MCP

get_claim(id=1013333)