CrossProfile基准揭示LLM群体决策记忆失效

Anouar Imel等研究者提出诊断基准CrossProfile，用于检验LLM群体决策中的记忆压缩策略。该基准含60个模板、480项任务，在固定事实文本的前提下交叉分配支持性、诱饵与无关事实的归属。 在Qwen2.5-7B、Llama-3.1-8B和两个DeepSeek模型上，按相关性筛选会重新引入诱饵，在经典hidden-profile配置下比最稀有优先选择低23至31分；最稀有优先平均不优于随机选择。研究者据此认为，稀有性与相关性启发式均不可靠。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。