跳到正文
原文
METR:Blog(网页)·· 15 小时前AI 评分30

METR 博客笔记:从 per-action 监控到 AI 研发加速的多项研究

Notes

AI 导读

METR 发布系列研究笔记,涵盖 per-action 阻断监控的有效性论证、LLM 是否加速网络/数学/算法领域发现速率,以及智能体能力度量。其中一项微调实验显示,四个推理模型经少量指令遵循数据微调后,CoT 可控性在分布外任务上从平均 2.9% 升至 8.8%;另一项分析发现约半数通过 SWE-bench Verified 的 AI 生成 PR 不会被仓库维护者合并入主分支。

来源:METR:Blog(网页) · metr.org