待验证50% 置信事实精确时间
标注一致性方面,Cohen's kappa为0.781(范围0.753-0.807),Fleiss' kappa为0.77。
1
来源数
50%
置信度
长期有效
时效性
2026/11/6
首次发现
来源
涉及实体
相关事实
待验证在边界匹配的片段上 Cohen's kappa 达到 0.964,但纳入遗漏实体、边界错误和标签修正后宏观 F1 骤降至 0.75371% 相似待验证在留出的人工标注数据上,最佳级联方案取得了macro precision 0.86、recall 0.76、F1 0.79的表现。68% 相似待验证准确率方面:τ=0.4 为 0.7305,托管单跑为 0.7085,本地单跑为 0.7320,τ=0.6 为 0.7115。68% 相似待验证在人工验证的Track B v1.0标准集上(161个条目),仲裁后的Cohen's kappa值达到0.8568% 相似待验证标注者间一致性IAA常用Cohen's Kappa系数(两个标注者)和Fleiss' Kappa系数(多个标注者)计算,Kappa值为1表示完全一致,0表示与随机一致无差异67% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/1142370API
curl https://kongchang.com/api/v1/knowledge/claims/1142370MCP
get_claim(id=1142370)