待验证50% 置信事实精确时间
在标注者间一致性评估中,Cohen's kappa 或 Krippendorff's alpha 高于 0.6 才算 substantial agreement,高于 0.8 才算几乎一致。
1
来源数
50%
置信度
长期有效
时效性
2026/11/8
首次发现
来源
涉及实体
相关事实
待验证一般认为Cohen's κ > 0.6为实质性一致,0.4–0.6为中等一致。75% 相似待验证标注一致性方面,Cohen's kappa为0.781(范围0.753-0.807),Fleiss' kappa为0.77。73% 相似待验证标注者间一致性IAA常用Cohen's Kappa系数(两个标注者)和Fleiss' Kappa系数(多个标注者)计算,Kappa值为1表示完全一致,0表示与随机一致无差异69% 相似待验证事实性标注通常要求Kappa大于0.8,而主观性标注可能只要求Kappa大于0.668% 相似待验证在分歧富集数据集上,gpt-4o-mini裁判与两位作者共同确认的黄金标准之间的Cohen's kappa一致性系数仅为0.0468% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/1147637API
curl https://kongchang.com/api/v1/knowledge/claims/1147637MCP
get_claim(id=1147637)