跳到正文
热点事件持续更新

论文提出 Interaction-as-a-Judge 交互式评测范式

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

Wayne Chi 等作者发布论文,提出名为 Interaction-as-a-Judge 的评测范式:让 computer-use agents(CUAs)直接与应用交互,以此评估和改进交互式应用。 论文称同时收集并发布两个数据集:6,858 对带人类偏好及对应智能体轨迹的应用,以及 222 个带人工核验需求标签的应用,用于支撑该评测方法。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月15日
  1. arXiv:cs.LG
    Interaction-as-a-Judge:用计算机使用智能体交互评估交互式应用

    研究提出 Interaction-as-a-Judge 评估范式,让 computer-use agents(CUAs)直接与应用交互,以评估和改进交互式应用。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。