跳到正文
Artificial Analysis· @ArtificialAnlys · X·· 2 小时前精选AI 评分67
AI 导读

Artificial Analysis 评测 MiniMax 新发布的 Flash 推理模型 MiniMax-M3.1-Flash,在 Intelligence Index 得 42 分,比 MiniMax-M3 高 13 分,与 GLM-5.3-Flash 持平,低于 DeepSeek V4.1 Flash 1017 的 45 分。

推荐理由

第三方实测给出 MiniMax-M3.1-Flash 的得分、成本与幻觉率数据,可与同类 Flash 模型直接对比选型。

正文 · AI 翻译

MiniMax-M3.1-Flash 在 Artificial Analysis Intelligence Index 上得分 42,比 MiniMax-M3 高 13 分,每任务成本不到后者一半。它与 GLM-5.3-Flash 得分持平,但落后于 DeepSeek V4.1 Flash 1017

MiniMax-M3.1-Flash 是 @MiniMax_AI 的新款 Flash 推理模型,我们在其最高 effort 设置下进行了基准测试。它在 Artificial Analysis Intelligence Index 上得分 42,与 GLM-5.3-Flash(max,42)持平,略高于 Gemini 3.8 Flash(high,41),落后于 DeepSeek V4.1 Flash 1017(max,45)

关键要点:
➤ 与 M3 相比,复杂推理能力大幅提升:MiniMax-M3.1-Flash 在 Humanity's Last Exam 上得分 48%,领先于 GLM-5.3-Flash(max,40%)和 DeepSeek V4.1 Flash 1017(max,43%),与 Gemini 3.8 Flash(high,48%)持平。在 CritPt 上它得分 22%,领先于 GLM-5.3-Flash(15%)和 Gemini 3.8 Flash(18%),略落后于 DeepSeek V4.1 Flash 1017(24%)。这些成绩相比分别得分 39% 和 4% 的 MiniMax-M3 有所提升

➤ 更少的输出 token,更低的每任务成本:MiniMax-M3.1-Flash 运行 Intelligence Index 使用了约 189M 输出 token,明显少于 GLM-5.3-Flash(max,约 324M)、DeepSeek V4.1 Flash 1017(max,约 224M)和 Gemini 3.8 Flash(high,约 334M)。结合每 1M 输入/输出 token $0.15/$0.60 的定价,其每个 Intelligence Index 任务成本约为 $0.22,而 GLM-5.3-Flash 约为 $0.28、DeepSeek V4.1 Flash 1017 约为 $0.26、Gemini 3.8 Flash 约为 $1.24,并且不到 MiniMax-M3 约 $0.51 的一半

➤ AA-Omniscience 准确率高,但被高幻觉率抵消:MiniMax-M3.1-Flash 在 AA-Omniscience(我们衡量事实回忆和幻觉的基准)上正确回答了 56% 的问题,而 GLM-5.3-Flash(max)为 28%、DeepSeek V4.1 Flash 1017(max)为 43%。它几乎尝试了每一道题,导致幻觉率为 93%,AA-Omniscience 总分为 16

模型关键细节:

➤ 上下文窗口:1M tokens

➤ 多模态:文本和图像输入,文本输出

➤ 定价:每 1M 输入/输出 token $0.15/$0.60,缓存输入为 $0.015/M

➤ 可用性:MiniMax 第一方 API,MiniMax 宣布将于 10 月 23 日发布开放权重

➤ 许可:目前为闭源权重,MiniMax 宣布将于 10 月 23 日发布权重

来源:Artificial Analysis · x.com