推理轨迹与证据冲突时的答案配置影响

用途与主要发现

该预印本探讨推理轨迹在答案阶段的双重作用：既可提高准确率，也可能在轨迹与当前证据冲突时压过证据。研究将已验证的证据版本与由各版本生成的轨迹交叉配对，并在相同轨迹与证据下采用两种答案配置——延续模型自身思考，以及单独发起一次答案调用。

在三类模型系列（gpt-oss、Gemma4、Qwen3）与 HotpotQA、MuSiQue 数据集上，报告称单独调用相比延续方式将“遵循证据”的比例提高 29.9 至 60.6 个百分点；在相同配对上，移除轨迹则会在两种配置下使准确率下降相近幅度。延续方式在多数冲突中重复了过时结论，而单独调用更常依据当前证据作答。

其他分析结论

摘要还提到：轨迹的最后一行承载了大部分价值；金标准证据在轨迹生成前提供帮助最大；干扰项会削弱单独调用下的纠正效果；重新推理与验证指令不同，在多数冲突中会遵循当前证据。

适用场景与限制

该结论适用于需要判断模型是跟随推理轨迹还是跟随最新证据的场景，如多跳问答评测设计。需要注意：这是 arXiv 预印本摘要，未经同行评审，论文结论尚未验证；摘要未披露具体提示词、评测细节与统计方法，实际效果需以原文和复现为准。