推理对齐

研究者提出 Spec Learning 框架，仅需少量偏好判断即可在推理时引导大模型行为，无需参数更新，在密集偏好信号的领域表现优于直接偏好优化（DPO）。