跳到正文
热点事件持续更新

论文用最后写入规则重解MemoryAgentBench冲突消解分

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

Egor Pakhomov 与 Erik Nijkamp 发布论文,将 MemoryAgentBench 冲突消解分项按基准自身的“最新陈述胜出”规则执行为一个零学习解析器(冻结在四条事实列表之一)。在官方指标下,该规则答对 80.25% 的题目,在三个留出列表上答对 74.5%。 作者称,剩余题目中有 67 条的已发布 gold 是最后写入图无法到达、但被覆盖陈述可以到达的条目,例如“印度首都是新德里”被“印度首都是格罗塞托”覆盖而 gold 仍为新德里;这类条目占 262K 多跳题目的三分之一。冲突消解分项通常被理解为测量“选择性遗忘”。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月8日
  1. arXiv:cs.CL
    MemoryAgentBench 冲突消解得分几何?冻结的最后写入解析器给出答案

    研究将 MemoryAgentBench 冲突消解分项按"最新陈述胜出"规则执行为零学习解析器,官方指标下该规则答对 80.25% 题目(三个留出列表上为 74.5%)。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。