概念
统计显著性
用于判断观察到的实验结果差异是否由随机波动造成的统计概念,通常需要足够样本量和假设检验手段
时间轴 (近 90 天)
10月18日
文章指出50条评估集太小,单条样本得失可让准确率跳动2个百分点,因此86%的结果可能只是模型恰好适配了这50条而非泛化能力。
待验证50%
10月18日
准确率从74%到76%在50条评估集上仅对应多答对1条样本,该差异在统计上几乎没有意义。
待验证50%
10月13日
标准误按n的平方根缩放,因此人为增大n会压窄误差棒,导致虚假的统计显著性。
待验证50%