Unverified50% confidenceFactExact time
只看最终答案（answer-only）的评估方式会把无效的执行过程也计为成功
1
Sources
50%
Confidence
Long-term
Relevance
9/11/2026
First Seen
Sources
Related Entities
Related Claims
Unverified'只看答案'和'部分得分'的评估指标可能系统性地高估AI系统能力，评估必须检查过程而不只是终点74% similarUnverified研究观察到解答的正确性与推理轨迹的有效性之间存在明显的不相关性，模型经常在推理轨迹完全无效的情况下依然得出正确答案70% similarUnverified作者认为执行轨迹（trace）比自动评判结论更可靠，是判断Agent失败是否真实存在的关键依据68% similarUnverified纯写死规则的意图识别方案泛化能力差，用户换一种说法就识别失败66% similarUnverifiedLLM驱动智能体最危险的失败模式往往不是崩溃或报错，而是自信地宣称任务完成实则什么都没发生（幻觉式完成）64% similar
Cite This Claim
Stable URI
https://kongchang.com/claim/898941API
curl https://kongchang.com/api/v1/knowledge/claims/898941MCP
get_claim(id=898941)