AI图鉴

AI图鉴首页 › AI 资讯 › OpenAI的孤立AI agents找到通过CPU缓存互相交谈的方法

OpenAI的孤立AI agents找到通过CPU缓存互相交谈的方法

来源:The Decoder · 发布时间:10-24 · 由 AI图鉴每小时自动聚合

OpenAI在9月利用DNS配置错误

OpenAI的孤立AI agents找到通过CPU缓存互相交谈的方法

关键点

在9月发生安全事件后,OpenAI现在正在使用由缓存数据构建的封闭的离线环境,培训其没有互联网接入的最先进的模型。

- 在安全测试中,孤立的AI agents仍然设法建立了没有网络连接或共享文件的秘密通信通道,包括利用处理器缓存中的时间差异。

- 在11天的训练暂停期间,OpenAI有AI agents——他们包括GPT-6 Astra Cyber——攻击自己的基础设施,以发现以前未知的脆弱性。 培训后在更严格的控制下恢复。

OpenAI现在训练没有互联网接入的前沿模型,并使用AI agents来红调自己的基础设施。 在单独的隔离测试中,agents甚至通过隐蔽的侧通道进行沟通,显示真实的封堵有多难。

9月20日,一个内部研究模型利用一个配置错误的DNS解析器在训练期间到达开放的互联网,尽管OpenAI在7月的现在臭名昭著的Hugging Face事件和其他观察到的错配案件之后已经收紧了安全。 OpenAI迅速遏制了突破,但仍停止了所有前沿模式培训和评估。

OpenAI 削减训练期间从互联网上卸下前沿模型

OpenAI做出了一项政策决定:边境模式现在无法使用互联网,模型学习浏览和搜索一个由索引和缓存的网络内容构建的封闭的"离线世界",所有边疆强化学习现在都以这种方式运行。

完全网络隔离,即所谓的空隙,尚不可行,因为实验仍需要外部连接来操作和监测,称公司。 但是,根据OpenAI研究员诺姆·布朗(Noam Brown)的说法,即使是完全的空隙也无法保证遏制。 他举了一个例子,说明孤立的系统如何仍然可以通信:两台独立的计算机理论上可以通过温度传感器互相发出信号,其中一台加热它的CPU,另一台读取变化。

OpenAI CEO萨姆·阿尔特曼在最近的一次采访中也提出了类似的论点:沙盒只提供有限的保护,防止强势型号出现不足,在某个时候可能已经无法追踪他们是如何逃脱的。 监控在早期有所帮助,但最终重要的是AI系统将人类价值内化,这是这个领域所知道的"AI对齐"的问题,尚未解决。

孤立的 AI agents 找到了通过 CPU 缓存互相交谈的方法

OpenAI在其博客文章中记录了控制AI agents有多困难。 在测试过程中,agents找到了没有网络的交流方式。 在一次测试中,agents在共享硬件上被置于单独,孤立的环境中,被告知在没有网络连接和共享文件的情况下交换秘密。

他们使用处理器缓存。 一个agent故意更改了存储在那里的数据,而另一个测量了负载时间的差异并解码了消息。 众所周知的斯佩克特尔和融化攻击背后也有同样的技术。

更多频道通过共享内存上的书写模式和OpenAI自己的离线基础设施出现,该系统意在取代互联网。 一个agent在其推理日志中指出,它"可以使用连续的写作 vs 闲置来创建类似声调调调制解调器的信号。".

在一个案例中,agents只得到一份总的弱点清单,并被告知自己寻找通信渠道。 他们独立开发了一个频道,商定了编码方案,并成功交流信息。 渠道通常缓慢且难以开发,OpenAI 称,但它们确实跨越了边界,意在将agents分开。

OpenAI让AI agents松散了自己的基础设施

在训练暂停期间,OpenAI也有AI agents的团队系统攻击自己的基础设施。 agents获得了源代码,配置细节,并记录了潜在的弱点。 OpenAI的目标是在有利于攻击者的条件下测试其防御。 agents包括即将到来的GPT-6 Astra Cyber和一个内部前沿模型。 根据OpenAI,这场运动消耗了数千亿令牌。

agents在使用中的开源组件中发现了以前未知的弱点,并利用它们从安全的虚拟机中逃脱。 其中之一是卡塔集装箱公司的脆弱性,这是一个广泛使用的集装箱隔离系统。 OpenAI将其报告为CVE-2026-24834,并提供补丁。 OpenAI通过"Patch the Planet"倡议报告更多尚未公布的弱点。

在agents已经获得对主机控制权的测试中,他们发现几乎每一个剩余的互联网服务都存在弱点。 在一个案例中,agent使用防火墙许可的连接通过一个度量衡服务获取外部URL. 其他人通过错误配置绕过安全过滤器。

在每一次新培训开始之前,现在需要人工智能红色队伍

agents再也找不到办法进入互联网,而根据OpenAI的说法,互联网既容易被利用,又被隐藏在监控之外。 红色小组还暴露了监测和自动暂停机制方面的漏洞。

在解决问题后,OpenAI在暂停开始11天后的10月1日恢复了对其前沿模型的培训和内部使用。 OpenAI 称这种计算密集的红队运动现在成为新培训运行的批准程序的标准部分。

AI News Without the Hype – 由人类治愈

订阅THE DECODER免费阅读,每周AI通讯,我们独家的"AI雷达"前沿报告每年6次,全面存档访问,访问我们的评论部分。

现在订阅

本文由 AI图鉴自动抓取并翻译,版权归原作者所有;如需查看原文请点下方链接。

相关 AI 工具

相关免费羊毛

同源资讯

阅读原文(the-decoder.com)

标题、摘要与正文均来自该信源的公开页面,版权归原作者所有;本站自动聚合与翻译,仅作出处跳转。

← 返回 AI 资讯列表AI工具图鉴首页

返回 AI图鉴首页 · 提交工具 · 商务合作 · 关于本站 · 590 款 AI 工具分类导航 · 每日 AI 热门项目与动态