跳到正文
原文
ARC Prize· @arcprize · X·· 3 小时前AI 评分69
AI 导读

ARC Prize 公布千问(Qwen)Qwen3.8-27B 在 ARC-AGI (Verified) 的成绩:ARC-AGI v2 得分 42.4%,每任务成本 $0.45;ARC-AGI v1 得分 87.5%,每任务成本 $0.22。作者观察到 Qwen 的 chat template 为 low 和 xhigh 推理档提供了引导,但没有 medium 档,这或许可以解释 medium 档消耗更多 token 却得分低于 low 档的现象。

正文

Qwen3.8-27B from @Alibaba_Qwen on ARC-AGI (Verified):

- ARC-AGI v2: 42.4%, $0.45/task
- ARC-AGI v1: 87.5%, $0.22/task

Qwen's chat template adds guidance for low and xhigh reasoning, but not medium, which may explain why medium used more tokens yet scored below low.

来源:ARC Prize · x.com