DPO

研究团队提出一种优化LLM偏好对齐训练效率的新方法，通过智能筛选最有信息量的比较对，在相同标注预算下显著提升模型性能。