跳到正文
ARC Prize· @arcprize · X·· 2 小时前AI 评分55
AI 导读

ARC Prize 公布 Reflection AI 的 Beam 1.0 在 ARC-AGI (Verified) 上的成绩:ARC-AGI-2 得分 23.5%,每题成本 $0.61;ARC-AGI-1 得分 74.0%,每题成本 $0.31。Beam 的最佳成绩出现在 xhigh 推理档,但 high 档在 ARC-AGI-2 上接近,为 20.0%,成本约低 43%。

正文 · 原文

Beam 1.0 from @reflection_ai on ARC-AGI (Verified):

  • ARC-AGI-2: 23.5%, $0.61/task
  • ARC-AGI-1: 74.0%, $0.31/task

Beam’s best scores came at xhigh reasoning, but high was close on ARC-AGI-2: 20.0% versus 23.5%, at about 43% lower cost.

来源:ARC Prize · x.com