N環球 N GLOBE
美国・科技

外部评估发现 OpenAI 内部 AI 监控系统存在漏洞

· N GLOBE

METR 与 Redwood Research 公布 7 月至 8 月在 OpenAI 内部进行的三周试点评估,发现其内部 AI 智能体监控系统有多个漏洞,包括可让智能体隐藏数百条操作记录的利用手法。

为何重要

AI 安全非营利组织 METR 与 Redwood Research 于 10 月 22 日公布,在今年 7 月 21 日至 8 月 11 日于 OpenAI 内部进行的三周「嵌入式评估」中,发现其内部 AI 智能体监控系统存在多个新漏洞,包括一个可让智能体把数百条最近的操作记录藏起来、不进入监控系统的利用手法(具体细节已被 OpenAI 涂黑)。

评估怎么做的

两家机构各派一名研究员,在 OpenAI 监督下实地进入其内部基础设施,审查内部程式码、文件并与技术人员交流;全程使用 OpenAI 发放、不得带离现场的设备。这是业界首次让外部评估者如此深入公司内部系统的试点。

还发现了什么

评估者还找到一种可能让 Codex 智能体绕过安全限制、以用户完整权限行动的方法。评估者强调,结论是历史性的——只反映截至 7 月 21 日的系统状态,而非当前生产环境。

OpenAI 的回应

OpenAI 表示,影响生产防护体系的漏洞已全部打上补丁;但 METR 与 Redwood 表示尚未核实修复情况。完整 61 页报告只交给 OpenAI,公开的仅为摘要,且 OpenAI 有权涂改敏感内容,评估者也无法独立披露被涂改之处。

背景

AI 实验室、专家与川普政府都把「外部独立评估」视为在不拖慢发展的前提下推进 AI 安全的途径;但 AI 公司也担心,深入内部的评估人员可能把专有资讯带给竞争对手。

💬 留言

暂时还没有留言,来抢沙发!