[控场AI]
基准FaithAlign-Gap

FaithAlign

首个理论级自动形式化忠实性基准,采用上下文感知的短语级对齐-再标注机制,评估形式语句对非形式数学命题语义的保留程度

时间轴 (近 90 天)

10月14日

论文提出了 FaithAlign,号称首个理论级忠实性基准,包含 460 个条目和 4,982 条短语级标注链接。

待验证50%
10月14日

在 8 个模型的评测中,GPT-6 Astra 取得了最高的缺陷 F1,为 47.8%。

待验证50%
10月14日

FaithAlign 的价值在于把「上下文感知的细粒度忠实性评估」变成了一个可量化、可复现的测试床。

待验证50%

全部知识事实 (3)

来源文章