思维脚手架如何影响AI决策?GPT架构差异导致干预效果相反
一项发表于arXiv的预印本研究深入探讨了结构化思维干预对大型语言模型战略经济推理能力的影响,并揭示了模型架构在其中的关键作用。研究团队以霍特林线性城市模型为诊断工具,系统评估了GPT-4.1-mini(标准指令遵循模型)和GPT-5-mini(推理优化模型)在五种不同条件下的表现。
实验设计了无干预基线对照和四种思维脚手架干预方案,覆盖八个涉及演绎与溯因推理的问题,采用三种提示框架,每个条件重复三次,共获得720个独立评判的响应。结果显示,思维干预类型与模型架构之间存在显著的交叉效应:承诺型干预能提升标准模型表现(+0.21),却损害推理优化模型(-0.63);而原则分离干预则呈现相反模式(标准模型-0.40,推理模型+0.31)。
值得注意的是,对抗性压力测试对两种模型均产生负面影响,但推理优化模型的受损程度是标准模型的2.6倍。研究还发现一个持续的陈述-程序差距现象:两种模型识别正确策略的能力远高于其执行能力,而原则分离干预能完全消除推理优化模型的这一差距,但所有干预对标准模型均无帮助。
这项研究为理解不同架构AI模型的推理机制提供了重要见解,表明“一刀切”的思维干预策略可能适得其反,未来AI辅助决策系统的设计需充分考虑模型的内在特性。