概念graph-grounded reference-free LLM-based evaluation / 图接地的无参考LLM评估
图接地评估
一种绕开参考文本、直接以输入知识图谱为锚点的无参考评估方法,由LLM判断生成文本与输入图谱之间的事实一致性,可检测三元组遗漏和矛盾等事实性错误
时间轴 (近 90 天)
10月23日
对于KG-to-text任务,图接地评估应成为标准配置,单纯依赖BLEU、ROUGE等参考指标可能低估LLM能力并忽视微调模型的事实性缺陷。
待验证50%
一种绕开参考文本、直接以输入知识图谱为锚点的无参考评估方法,由LLM判断生成文本与输入图谱之间的事实一致性,可检测三元组遗漏和矛盾等事实性错误
对于KG-to-text任务,图接地评估应成为标准配置,单纯依赖BLEU、ROUGE等参考指标可能低估LLM能力并忽视微调模型的事实性缺陷。