开源模型刷分失真,作者倡议另建细分评测
热点事件持续更新
开源模型刷分失真,作者倡议另建细分评测
1 篇报道1 个报道来源18 小时前更新
先了解这件事
AI 综述
针对国产开源模型集体刷高AA榜分数、跑分与体感严重背离的现象,有文章提出开源模型应放弃综合榜单竞争,转向建立贴合真实任务与环境的细分领域Benchmark。 作者以DeepSeek 4.1 Flash专注推理效率、K3优化前端小游戏数据为例,主张国产模型在各自赛道做到第一,并称将开源一个真实任务Benchmark社区。 上述主张为作者观点,其所称的细分评测效果尚未得到验证。
AI 根据报道生成 · 2 小时前更新
最新进展10月30日 10:00
开源模型亟需另开一桌:AA榜被刷烂后如何建立自己的标准报道时间线
沿着报道,了解事件的不同侧面。
10月30日
- elsewhere:文章开源模型亟需另开一桌:AA榜被刷烂后如何建立自己的标准
针对国产开源模型集体刷高AA榜分数、跑分与体感严重背离的现象,文章提出开源模型应放弃综合榜单竞争,转向建立贴合真实任务与环境的细分领域Benchmark。作者以DeepSeek 4.1 Flash专注推理效率、K3优化前端小游戏数据为例,主张国产模型在各自赛道做到第一,并宣布将开源一个真实任务Benchmark社区。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。