跳到正文
热点事件持续更新

开源模型刷分失真,作者倡议另建细分评测

1 篇报道1 个报道来源18 小时前更新

先了解这件事

AI 综述

针对国产开源模型集体刷高AA榜分数、跑分与体感严重背离的现象,有文章提出开源模型应放弃综合榜单竞争,转向建立贴合真实任务与环境的细分领域Benchmark。 作者以DeepSeek 4.1 Flash专注推理效率、K3优化前端小游戏数据为例,主张国产模型在各自赛道做到第一,并称将开源一个真实任务Benchmark社区。 上述主张为作者观点,其所称的细分评测效果尚未得到验证。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月30日
  1. elsewhere:文章
    开源模型亟需另开一桌:AA榜被刷烂后如何建立自己的标准

    针对国产开源模型集体刷高AA榜分数、跑分与体感严重背离的现象,文章提出开源模型应放弃综合榜单竞争,转向建立贴合真实任务与环境的细分领域Benchmark。作者以DeepSeek 4.1 Flash专注推理效率、K3优化前端小游戏数据为例,主张国产模型在各自赛道做到第一,并宣布将开源一个真实任务Benchmark社区。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。