Benchmark
HelpSteer
用于大模型对齐研究的人类标注偏好数据集，包含多维度的帮助性标注，常用于评估和训练对齐模型
Timeline (last 90 days)
Oct 8
HelpSteer数据集收集人类对模型回复多个维度（如有用性、冗长度）的有序量表反馈，评分依赖于具体的提示-回复对
Unverified50%
Sep 24
研究在HelpSteer和UltraFeedback两个数据集上横跨七组目标配对进行了系统实验
Unverified50%
用于大模型对齐研究的人类标注偏好数据集，包含多维度的帮助性标注，常用于评估和训练对齐模型
HelpSteer数据集收集人类对模型回复多个维度（如有用性、冗长度）的有序量表反馈，评分依赖于具体的提示-回复对
研究在HelpSteer和UltraFeedback两个数据集上横跨七组目标配对进行了系统实验