论文公开了三次失败的 DPO 对齐尝试、一次受控的数据配比扫描，以及一个评测方法学上的静默失败模式。