Nathan Lambert 为 AAv5 指数与开源模型评测辩护

Nathan Lambert 在 X 上表示，他认为有必要同时为 AAv5 指数和开源模型评测辩护。他称，基准测试比大多数人以为的更混乱、更主观、也更棘手。 这条发言没有给出 AAv5 指数的具体数值、评测方法或涉及哪些开源模型，也没有说明他针对的是哪一类批评。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。