跳到正文
热点事件持续更新

研究者发布ParanoiaEval编程智能体评测基准

1 篇报道1 个报道来源5 小时前更新

先了解这件事

AI 综述

Hanjun Luo 等作者发布 ParanoiaEval,称其为首个面向编程智能体风险处理能力的统一评测基准。该基准基于软件工程风险管理的 Avoidance-Transfer-Mitigation-Acceptance 框架,构建了 200 个仅在处理定义证据上不同的仓库级任务对,并引入风险处理违规与证据响应性两项指标。 据研究者说法,现有评测缺少对编程智能体风险处理能力的统一衡量,ParanoiaEval 旨在填补这一空白。基准的具体评测效果尚未在报道中给出。

AI 根据报道生成 · 3 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月7日
  1. arXiv:cs.AI
    ParanoiaEval:评测智能体编程中不必要的防御性行为

    研究者推出 ParanoiaEval,首个面向编程智能体风险处理能力的统一评测基准,基于软件工程风险管理的 Avoidance-Transfer-Mitigation-Acceptance 框架,构建 200 个仅在处理定义证据上不同的仓库级任务对,并引入风险处理违规与证据响应性指标。

本事件热度走势

可比范围当前
9
可比范围峰值
910月7日 14:00
近 24 小时变化
–

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。