跳到正文
原文
ARC Prize:官方博客·· 12 小时前精选AI 评分69

ARC-AGI-2 基准发布,设计用于测试 AI 推理系统的符号解释与组合推理能力

ARC-AGI-2

AI 导读

ARC Prize 官方介绍 ARC-AGI-2 基准,旨在压力测试最先进的 AI 推理系统并提供 AGI 进展信号。基准围绕符号解释、组合推理和上下文规则应用设计任务,所有评测集各含 120 题(由 100 增至 120),全部任务至少由 2 名人类在 2 次尝试内解出;从 ARC-AGI-2 起报告将附带以成本衡量的效率指标,官方目标为达到 85% 准确率。

推荐理由

ARC Prize 官方介绍 ARC-AGI-2 的任务设计与校准方法,读者可了解新基准为何强调符号理解与效率度量。

来源:ARC Prize:官方博客 · arcprize.org