基于置信度校准的推理扩展控制器研究

研究内容

该预印本关注评估器引导推理中的局部决策问题：每一步在「采用当前答案」「返回备选」「继续投入更多推理」之间选择。作者将其形式化为计算感知的三动作控制器，终止动作依据预测的答案成功率评分，扩展动作依据基于 rollout 的后续成功代理评分，并显式计入计算成本。

方法与结果

论文给出局部动作间隙分析，刻画评分误差何时可能改变决策，并给出沿实际扩展路径的期望遗憾界。据此学习并校准各动作专属的置信度估计，对模糊决策加入局部不确定性惩罚。在留出的宽度扩展与修订任务上，该控制器相比经校准选出的固定策略提升了观测效用，同时在线计算量分别降低约 30% 和 16%。在四个 Qwen3-8B 随机种子下，两种设置中计算量均低于拟合的 Q 值基线，但效用差异较小且方向不一。作者据此将评估器引导推理视为不确定性下的资源分配问题，而非统一更强的推理器。

限制与待核实

这是 arXiv 预印本摘要，未经同行评审，结论尚未得到独立验证；摘要未提供完整实验细节、任务定义与统计显著性，实际效果需结合原文与复现结果判断。