待验证50% 置信基准精确时间

在 5,000 个随机特征、随机标签的数据集上，若先在完整数据上挑选 top 20 特征再做 5 折交叉验证，准确率可达 85%（20 个随机种子平均 87.7%）；将特征选择放入 Pipeline 内部后，准确率回落到 48%（平均 50.0%）。

1

来源数

50%

置信度

长期有效

时效性

2026/11/6

首次发现

来源

trainlint：静态检查揪出不会崩溃的 ML 训练 Bug

涉及实体

trainlintproduct 数据泄漏concept

相关事实

待验证在基准测试中，随机策略平均获得约0.56个徽章76% 相似待验证在纯随机标签上，任何无泄漏模型的期望准确率都是 50%，显著高于该基线几乎必然存在信息泄漏。76% 相似待验证在 n=100 且正负样本各半的条件下，55% 准确率的 95% 置信区间大致在 45%–65%，覆盖 50% 的基线，因此 5 个百分点的差距可能是随机波动。75% 相似待验证在5%显著性水平下测试100个随机因子，期望会有5个看起来显著（多重假设检验问题）75% 相似待验证在RadioML 2016.10a数据集上，使用5个随机种子和44k帧的留出测试集，FuseAMC达到55.8%的整体准确率。75% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/1142635

API

curl https://kongchang.com/api/v1/knowledge/claims/1142635

MCP

get_claim(id=1142635)