待验证50% 置信事实精确时间

McNemar检验的零假设是b和c在总体中相等，即两个模型犯错方向对称，无系统性优劣

1

来源数

50%

置信度

长期有效

时效性

2026/7/14

首次发现

来源

McNemar检验对比机器学习模型：随机种子下的正确用法

redditr/learnmachinelearning2026/7/11

相关事实

待验证McNemar 检验关注两个模型在每个样本上的分歧情况，只有判断结果不一致的样本（b和c单元格）具有信息量，两者都对或都错的样本被视为无关信息79% 相似待验证OpenAI的图表显示，在较低的测试时计算量下，模型对这道题的成功率接近零，只有在极长的推理链条下才偶尔成功66% 相似待验证对比学习中的推远操作只要求负样本相似度低于正样本，并不要求达到-1的极端值66% 相似待验证蒙特卡洛估计的标准误差与模拟次数N的关系为标准误差正比于1/√N64% 相似待验证多重比较问题指同时测试多个模型变体时，即使每个单独检验显著性水平设为0.05，整体假阳性率也会急剧膨胀64% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/503209

API

curl https://kongchang.com/api/v1/knowledge/claims/503209

MCP

get_claim(id=503209)