待验证70% 置信事实精确时间
一致性比率的衡量方法包括精确一致率、相邻一致率(允许±1分偏差)、Cohen's Kappa 系数,连续分数还可使用 Pearson 相关系数或 Spearman 等级相关
2
来源数
70%
置信度
长期有效
时效性
2026/8/10
首次发现
来源
相关事实
待验证标注者间一致性IAA常用Cohen's Kappa系数(两个标注者)和Fleiss' Kappa系数(多个标注者)计算,Kappa值为1表示完全一致,0表示与随机一致无差异74% 相似待验证准确率的计算方式是对角线上的正确计数除以总数。64% 相似待验证第一种度量是有效秩(Effective Rank),以连续方式衡量雅可比矩阵在多少个方向上真正有作用63% 相似待验证top-1%准确率是评估量化模型与原始全精度模型输出一致性的指标,关注模型置信度最高的1%的token是否与全精度版本一致63% 相似待验证在标注者间一致性评估中,Cohen's kappa 或 Krippendorff's alpha 高于 0.6 才算 substantial agreement,高于 0.8 才算几乎一致。62% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/724017API
curl https://kongchang.com/api/v1/knowledge/claims/724017MCP
get_claim(id=724017)