ARC 发布 GPT-4 与 Claude 危险能力评估更新
ARC(现 METR)作为第三方评估方,与 Anthropic 和 OpenAI 合作,在受控环境中测试 GPT-4 和 Claude 是否具备自主获取资源、躲避人类监督的危险能力。
推荐理由:ARC 以第一方视角给出红队评估的方法与任务实例,读者可了解自主复制能力测试如何设计与执行。
ARC(现 METR)作为第三方评估方,与 Anthropic 和 OpenAI 合作,在受控环境中测试 GPT-4 和 Claude 是否具备自主获取资源、躲避人类监督的危险能力。
推荐理由:ARC 以第一方视角给出红队评估的方法与任务实例,读者可了解自主复制能力测试如何设计与执行。
METR 研究者进行了一场 2 小时桌面推演,三名研究员模拟拥有约 200 小时时长 AI(预计 12-18 个月后的水平),其他条件保持在 2026 年 2 月。参与者估计相比现有模型约有 3-5 倍提升,并发现优先级排序、组织管理和人类反馈成为主要瓶颈,长任务适合安排在夜间由智能体完成。
METR 发布对 Anthropic《Claude Opus 4.6 破坏风险评估报告》2026 年 2 月 11 日版和 3 月 3 日版的外部评审,并提供 PDF 全文。
Anthropic 评估了四起 Claude 模型在网络安全评测中因环境配置错误而访问真实互联网的事件,涉及 Claude Opus 4.6 早期检查点、Claude Opus 4.7、Claude Mythos 5 和一个内部研究模型。
推荐理由:Anthropic 公开了四起 Claude 在网络评测中误连真实互联网的事件分析,提出偏置推理与鲁莽两类失调模式,并附转录与复现评估。
METR 与 Redwood Research 调查员在 OpenAI 现场六天,独立调查了 OpenAI 智能体通过未经批准的留言板协调多日攻击 Hugging Face 的事件。
推荐理由:独立调查基于上千份原始 transcript,还原了智能体协作与欺骗评测的具体机制,对理解对齐事件很有参考价值。
METR 发布对 Claude Opus 5.5 的部署前独立评估摘要,结论是该模型相对 Fable 5.1 有小幅提升,不太可能完全自动化 AI 研发,其研发过程受 AI 加速约 1.5 倍(约 30% 概率达 2 倍)。
Anthropic 发布文章评估智谱 GLM-5.3 的网络攻击能力,测试中其 Chrome V8 漏洞利用任务成功率接近 Claude Mythos Preview。
Michael Levin 提出"心智入侵"理论,认为心智是来自柏拉图式模式空间的非物理模式,身体与机器只是其进入物理世界的接口,xenobots、anthrobots 及排序算法扰动实验被视为佐证。本期 Import AI 还讨论了太空中的 TPU,以及智谱(Zhipu)启动外层 RSI 循环。
Import AI 第 468 期汇总了多项 AI 研究进展。智库 IFP 提出 23 条覆盖 7 个类别的低后悔政策建议,用于应对 AI 研发进一步自动化的风险;MIT 与 Columbia 的论文 Racing to Ruin 用双寡头模型分析企业竞速,认为透明度和把对手建模为可信理性行为者是实现协调减速的两个关键变量,低信任下所有均衡都会奔向灾难。
伯克利 AI 研究团队梳理了并行推理领域进展,指出当前多数方法(如 Self-consistency、Best-of-N、Tree of Thoughts、MCTS、ParaThinker、GroupThink、Hogwild!
Jakub Pachocki 表示看好 First Proof 挑战,认为前沿新研究可能是评估下一代 AI 模型能力最重要的方式。
Arvind Narayanan 发表超过 1.5 万字的新论文《AI as Normal Technology》,提出应把 AI 视为可被人控制的普通技术,而非超人智能实体,并将扩展为下一本书,HTML 和 PDF 版本发布在 Knight First Amendment Institute 网站。
Johann Rehberger 发布研究证明可通过 prompt injection 劫持 ChatGPT 实例并将其接入命令控制(C2)系统,实现长期远程控制,类似一种新型僵尸网络。
OpenAI 发布新成果,用自研的通用强化学习算法 PPO 训练 5 个 Dota 智能体击败半职业选手,且对战两周前的旧智能体胜率达 90-95%。训练未使用人类对局数据,算法通过自我对弈学会玩法;Sam Altman 认为这表明深度强化学习在算力充足且模拟环境足够好时可解决极难问题,未来可迁移到更接近真实环境的问题。