过程记忆

研究人员提出过程记忆蒸馏方法，让语言模型在训练过程中自动提取并内化跨任务的行为模式，实现参数层面的自我改进。实验显示该方法在多个基准测试中显著优于现有自蒸馏技术。