待验证50% 置信事件精确时间
schemagate在200题的试点测试中F1为0.83,33个错误拒绝中有32个源于一个正则表达式Bug:检查无法正确处理大写AS(如FROM students AS T1),导致将别名误读为表名并拒绝查询。
1
来源数
50%
置信度
短期 (~14 天)
时效性
2026/10/17
首次发现
有效期至:2026/10/31
来源
涉及实体
相关事实
待验证schemagate 在提示词中加入“你看到的是这个数据库的一部分,如果需要更多信息就拒绝作答”,在 100 道问题的试点中将错误答案从 16% 降到了 5%。65% 相似待验证会让Schema失效的四类错误包括:标记与可见页面矛盾、孤立节点、陈旧事实、静默验证错误64% 相似待验证不应对每个错误都触发故障转移,格式错误的prompt会在所有供应商上失败,应先校验输入63% 相似待验证故障转移架构中应区分值得重试的错误(429、5xx、超时)和不该重试的错误(400参数错误、401鉴权失败)62% 相似已验证应显式定义失败形态(如{"error": ...})并在代码层做校验,将漂移从隐性错误答案转变为可捕获的异常61% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/1053848API
curl https://kongchang.com/api/v1/knowledge/claims/1053848MCP
get_claim(id=1053848)