过程奖励模型

对推理链中每一个中间步骤的质量单独给予奖励信号的模型，是RLHF的进化变体，将奖励信号从结果细化到过程中每一步，对数学、编程等需要严密逻辑链的任务效果尤为突出