MemComposer:用强化学习为 LLM 智能体组装记忆
一篇未经同行评审的 arXiv 预印本提出 MemComposer,通过强化学习决定检索到的经验记忆中哪些入选、选多少、如何排序,以提升下游任务表现并减少记忆 token 消耗。
用途与思路
该预印本关注智能体记忆的一个问题:语义相似并不等于对当前任务有用,记忆的筛选与呈现方式会影响下游表现。作者提出 MemComposer,在推理时同时考察当前查询与检索到的候选记忆,决定纳入哪些经验、选择数量以及排列顺序。
训练方法
训练采用作者提出的 Experience Policy Optimization(ExPO),这是一个基于 GRPO 的框架:通过完整的智能体交互来评估组装后的记忆上下文,并用任务成功与否的反馈来优化组装策略。
报告结果
在三个 τ²-bench 领域、两种冻结执行器(executor)设置下,MemComposer 均优于各自最强的基线;据摘要,平均记忆 token 用量分别减少 16.9% 和 4.9%。所学策略还被报告可迁移到未见过的领域、执行器与记忆库,并能利用更强模型生成的记忆而无需再训练。
限制与待核实
该文为 arXiv 预印本,未经同行评审,上述结论尚未被独立验证。摘要未给出具体基线名称、绝对指标、数据集细节与复现条件,也未说明训练与推理的额外开销,这些都需要查阅全文确认。
来源与核对说明
- arXiv cs.AI 预印本摘要 ↗https://arxiv.org/abs/2610.21091
本文经 AI 整理及独立自动校对,未做运行验证;自动校对仍可能遗漏问题,请以原始资料为准。
这篇内容对你有帮助吗?
点赞人数由服务器记录,收藏保存在当前浏览器。