arXiv 预印本提出研究契约验证方法
热点事件持续更新
arXiv 预印本提出研究契约验证方法
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
Eitan Waks 与 Ben Glocker 提交未经同行评审的预印本,提出"研究契约"机制:把声明的实验选择、执行义务与结论范围绑定到记录的执行证据上,用于验证 AI 生成研究是否按契约执行,作者称这种验证不同于判定科学真理。 在八个自撰的干净/变异配对诊断中,确定性检查器按已登记、针对特定故障的规则检查已批准且已执行的对象,检出全部八个已登记变异。十八个评审别名在只拿到各自经元数据过滤的包、没有配对上下文和登记故障标签的情况下,144 个变异评估用例中 104 个被标记缺陷,32 次弃权、8 次终止失败;因提示要求证据不足时弃权,变异用例中无一被明确判为干净。
AI 根据报道生成 · 1 小时前更新
最新进展10月9日 12:00
仅凭产出无法验证什么:面向研究智能体的研究契约报道时间线
沿着报道,了解事件的不同侧面。
10月9日
- arXiv:cs.AI仅凭产出无法验证什么:面向研究智能体的研究契约
研究提出"研究契约"机制,将声明的实验选择、执行义务与结论范围绑定到记录的执行证据上,以区分契约层面的验证与科学真理。在八个自撰的干净/变异配对诊断中,确定性检查器对全部八个已登记变异均成功检出;而18个评审别名在仅获元数据过滤包、无配对上下文与故障标签的情况下,144个变异评估用例中有104个被标记缺陷,其余为32次弃权和8次终止失败。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。