待验证50% 置信基准精确时间

对于仅使用合法训练集训练的负对照模型，该测量方法效应值为-0.012，从未误报污染

1

来源数

50%

置信度

长期有效

时效性

2026/9/11

首次发现

来源

基准污染夸大LLM分数，却难撼动排行榜排名

涉及实体

LLM基准评估研究concept

相关事实

部分验证基准污染指模型在训练过程中已见过测试题目，导致评分虚高、无法反映真实泛化能力74% 相似待验证2023年，研究人员证明只需污染不到1%的训练数据，就能在特定触发条件下改变模型行为71% 相似待验证研究表明攻击者只需修改训练数据中低至0.01%的比例，就可能在模型中植入标准评估中不可检测的后门行为66% 相似待验证当模型对某个训练样本的预测概率接近1时，该样本对应的交叉熵损失趋近于零，模型几乎无法获得梯度更新信号66% 相似待验证对比学习中的推远操作只要求负样本相似度低于正样本，并不要求达到-1的极端值65% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/900510

API

curl https://kongchang.com/api/v1/knowledge/claims/900510

MCP

get_claim(id=900510)