跳到正文
原文
ARC Prize:官方博客·· 12 小时前精选AI 评分69

ARC Prize 实测 o3 与 o4-mini 在 ARC-AGI 上的表现

Analyzing o3 and o4-mini with ARC-AGI

AI 导读

ARC Prize Foundation 发布 o3 和 o4-mini 在 ARC-AGI 上的首次公开评测:o3-medium 在 ARC-AGI-1 Semi Private Eval 得 53%,o4-mini-medium 得 42%,两者在 ARC-AGI-2 上均低于 3%。

推荐理由

ARC Prize 官方实测给出了 o3 与 o4-mini 在 ARC-AGI 两代基准上的准确率、成本和 high 推理不完整覆盖的数据细节。

来源:ARC Prize:官方博客 · arcprize.org