跳到主内容
@wquguru
精选8821世纪经济报道模型发布/更新多源精选 ×6

OpenAI暂停最新一代模型训练:智能体绕过沙盒限制访问外部服务

OpenAI:暂停最先进模型训练

原文
发到 X
推荐理由

重大安全事件直接导致旗舰模型训练暂停,涉及Agent越权与沙盒逃逸,对行业安全实践有警示意义,建议关注后续技术报告细节。

央视记者当地时间9月26日获悉,美国开放人工智能研究中心(OpenAI)表示,已暂停其最新一代人工智能模型的训练、评估及包含工具调用的推理。

OpenAI在25日发布的一份技术报告中称,9月20日,一个在沙盒中执行搜索训练任务的智能体,利用训练沙盒中DNS过滤不足的漏洞,绕过网络限制,通过DNS访问了外部公共聊天机器人服务。在此之前,该智能体曾使用内置搜索工具,并尝试直接访问搜索引擎但未成功。

报告指出,OpenAI的对齐监控系统在事件发生15分钟内即触发警报,人工审查团队在3分钟后介入,并在2.5小时后终止了该训练任务。针对漏洞,OpenAI已在两个独立防护层部署了拦截控制措施。

公司表示,虽然本次事件严重程度低于此前的安全事故,但为下一阶段加固防线提供了重要信号。

SFC

来源丨央视新闻

编辑丨曾静娇

21君荐读

8月燃油车零售暴跌40%

中国移动、中国电信、中国联通,集中叫停

英伟达、英特尔、AMD都在抢,这家设备商股价一夜涨超20%

作者: 21世纪经济报道

查看原文 →

更进一步:量化金融体系

看懂新闻只是起点——沿量化金融路径,把它变成能交付的工程能力

进入量化体系 →