基准
ALIGNMENTFORECASTBENCH
用于衡量对齐预测任务进展的基准测试集,覆盖5000余个预测问题、17个目标模型、32个数据集和16种失效模式,旨在检验预测方法在不同模型、数据和失效类型上的泛化表现
时间轴 (近 90 天)
9月30日
研究者构建了名为 ALIGNMENTFORECASTBENCH 的基准测试集,覆盖超过5000个预测问题、17个目标模型、32个数据集和16种失效模式
待验证50%
9月30日
前沿大模型在 ALIGNMENTFORECASTBENCH 上直接预测对齐风险的表现效果很差
待验证50%