基准
HelpSteer
用于大模型对齐研究的人类标注偏好数据集，包含多维度的帮助性标注，常用于评估和训练对齐模型
时间轴 (近 90 天)
10月8日
HelpSteer数据集收集人类对模型回复多个维度（如有用性、冗长度）的有序量表反馈，评分依赖于具体的提示-回复对
待验证50%
9月24日
研究在HelpSteer和UltraFeedback两个数据集上横跨七组目标配对进行了系统实验
待验证50%
用于大模型对齐研究的人类标注偏好数据集，包含多维度的帮助性标注，常用于评估和训练对齐模型
HelpSteer数据集收集人类对模型回复多个维度（如有用性、冗长度）的有序量表反馈，评分依赖于具体的提示-回复对
研究在HelpSteer和UltraFeedback两个数据集上横跨七组目标配对进行了系统实验