新闻
WikiTrace:证据链接的记忆系统提升LLM代理性能
WikiTrace,一个证据链接的记忆系统,减少了LLM代理中的记忆引起的退化,在五个基准上超越了之前的方法。
一项名为“不要仅仅相信你的记忆:证据链接的记忆减少LLM代理中的记忆引起的退化”的新研究介绍了WikiTrace,这是一种创新的记忆系统,旨在通过将提炼的经验与其原始任务轨迹相联系,从而提升大型语言模型(LLM)代理的性能。这项研究于2026-11-10在arXiv(2611.14320)上发表,由KAIST和DeepAuto.ai的Yukyeong Lee、Yumin Choi、Jinheon Baek和Sung Ju Hwang进行。
解决记忆引起的退化
LLM代理依靠外部记忆来提高任务绩效,通过从过去任务轨迹中提炼经验。然而,这一过程可能导致记忆引起的退化,代理可能会失败执行本可以在没有记忆的情况下解决的任务。当代理遵循不正确的经验或错误应用有效的经验时,会出现这种情况,因为这些经验通常是基于任务成功或失败标签而得来的,而未能接触到底层的轨迹。
WikiTrace通过将每个经验与其轨迹成功或失败的理由总结以及原始轨迹本身相链接来解决此问题。这种证据链接的方法允许代理在行动之前验证和完善经验,从而减少由不完整或冲突的见解引起的错误。
性能验证
研究人员在五个代理基准上验证了WikiTrace,证明它始终优于现有的记忆方法和仅使用相同见解的基线。平均而言,WikiTrace在最佳之前的记忆方法上获得了一个8.5点的改进,并展现出最低的退化率为4.5%。
开源实现
WikiTrace的开源实现可在GitHub上获得,地址为https://github.com/yukyeongleee/wikitrace。该系统需要Python 3.11+、Node 20、Docker和uv进行安装。详细的设置说明和基准配置已在代码库中提供,使开发者能够复制和扩展研究成果。
WikiTrace代表了LLM代理记忆系统的重大进展,提供了一种强大的解决方案,以减轻记忆引起的退化,并提高各类应用的任务性能。