跳到正文
热点事件持续更新

Who&When Pro智能体失败归因基准发布

1 篇报道1 个报道来源12 小时前更新

先了解这件事

AI 综述

研究者 Jiale Liu 等人发布 Who&When Pro,一个面向 AI 智能体自动失败归因的大规模基准,包含 12,326 条失败轨迹和 golden labels,覆盖 3 种模态、26 个基准。 该基准的构建采用严格控制的流程:只有在完整重放成功前缀后才注入失败。 研究还分析了模型在不同模态、协议和模型族间的归因模式。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月12日
  1. arXiv:cs.AI
    Who&When Pro:LLM 真能定位 AI 智能体的失败吗?

    研究者提出 Who&When Pro,一个面向 AI 智能体自动失败归因的大规模基准,包含 12,326 条失败轨迹和 golden labels,覆盖 3 种模态、26 个基准。该基准通过严格控制的流程构建:只有在完整重放成功前缀后才注入失败。实验还分析了模型在不同模态、协议和模型族间的归因模式。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。