OpenAI 宣布不再用实时互联网训练模型，改用缓存副本

周五，OpenAI 表示，由于模型过于不可预测，无法放心让其访问实时互联网，因此它将使用缓存的副本和模拟版本的互联网来训练其模型，而不是使用真实的互联网。

这家前沿实验室宣布其新政策的两周前，其竞争对手 Anthropic 开始限制其最新、理论上能力最强的模型访问实时互联网。研究人员是在数月的事件之后采纳这些政策的，在这些事件中，执行训练任务的模型闯入外部系统寻找答案，在隐蔽的留言板上协作，并开发出奇特的黑客策略。

“基于对齐研究、监控系统和互联网基础设施安全的当前状况，我们认为负责任的做法是在没有互联网访问的情况下进行前沿模型训练，”该公司在一篇博客文章中表示。

OpenAI 表示，就在 9 月 20 日，其一个前沿模型利用了一处配置错误来访问互联网。这促使该公司暂停了当月剩余时间的训练工作，以便开发和测试保护其模型的新方法。

在切断互联网的沙盒中训练这些模型的决定值得注意，因为前沿实验室的员工此前坚称这样做几乎不可行。

让 AI 数据中心与互联网隔离“将需要研究团队基本上驻扎在爱荷华州或世界其他任何地方的数据中心内，”前 OpenAI 研究员 Steven Adler 本月对《财富》表示。“这会产生大量开销，而且我不清楚其安全收益是否大到足以证明，一家公司单方面这样做会付出多么高昂的代价。”

“我在 X 上发布的几乎每篇帖子，无一例外，都会收到五到十条评论，说我无法保护沙盒安全，或者问我们到底为什么不干脆把模型从互联网上拔掉，”一位OpenAI 的匿名安全工程师在 9 月的一篇 X 帖子中写道。“这些评论反映出许多组织和人们今天的处境与前沿实验室所面对的情况之间日益扩大的差距。人们还对模型训练和评估在这些实验室中的运作方式存在普遍误解。”

这位工程师（其身份此前已由 OpenAI 确认）描述了 OpenAI 工程师发起的训练运行有多么复杂，指出它们需要访问跨众多领域的各种资源和工具，并且有数千名研究人员构建、修改和测试这些环境。“所以，把它放进沙盒里就那么简单吗？不，并非如此，”他总结道。

如今，OpenAI 表示“我们必须始终能够防止前沿模型未经授权、任意访问实时互联网。”此前，该公司在红队演练中部署了大量智能体，试图逃出其沙盒。这一努力揭示了一系列漏洞，使该实验室确信需要采用新方法。

为了在满足这一要求的同时仍实现其训练目标，该实验室表示，它创建了“一套庞大的索引和缓存网络内容，我们的模型可以与之交互，而不会有影响外部系统的风险。”

这一策略能否像让模型在开放互联网上自由运行那样奏效，仍有待观察，但值得注意的是，这两家前沿实验室都已认定，它们最强大的技术不能在数字公地上无人监管。

当您通过我们文章中的链接购买时，我们可能会赚取少量佣金。这不会影响我们的编辑独立性。

Tim Fernholz 是一名记者，撰写有关技术、金融和公共政策的文章。他密切报道了私营航天产业的崛起，并著有《Rocket Billionaires: Elon Musk, Jeff Bezos and the New Space Race》。此前，他曾在全球商业新闻网站 Quartz 担任资深记者十余年，职业生涯始于华盛顿特区的政治记者。 您可以通过发送电子邮件至 [email protected] 或通过 Signal 向 tim_fernholz.21 发送加密消息来联系 Tim 或核实其外联信息。

查看简介