潜在链式推理是否真的在推理：一个统一分类法的预印本研究

研究背景与问题

潜在思维链（Latent Chain-of-Thought）用连续的隐藏状态替代显式书写的推理步骤，让模型在给出答案前多做一些计算。但来源指出，这些步骤究竟执行了什么计算仍不清楚；高任务准确率和可解码的中间答案都不能证明模型真的依赖这条潜在链得到答案。该预印本尚未经过同行评审，结论有待验证。

方法与主要发现

研究覆盖 21 组模型-任务配置，涉及三种训练方法、三类推理任务和两种主干模型，结合链删除、内容替换、探针与轨迹分析，检验链是否影响答案、编码了什么以及状态如何变化：

• 逻辑任务上，COCONUT 往往在链开始前就已携带可读答案；状态很早就收敛，删除链后预测几乎不变。
• 逐步监督会形成有序的推理步骤布局，并可能让模型依赖该链；但有序链也可能只是占位符——删除会损害性能，而替换内容后答案不变。
• 算术任务上，所有测试方法都表现出对链内容的依赖。

分类法含义

作者提出一个分类法，把链"表示什么"与模型"如何使用"分开。按此视角，此前的相互竞争的报告并不矛盾：占位符 token、坍缩的叠加表示、依赖步骤的因果角色分别对应不同种类的链，且来自不同任务、训练方法或测量方式。只有当研究说明自己测试的是哪种属性——模型是否使用链、链持有什么、状态如何移动——关于潜在推理的结论才可以相互比较。

限制与待核实

来源为预印本摘要，未经同行评审；具体任务、模型配置及实验细节需查阅原文核实。结论能否推广到其他任务与架构尚不确定。