据业内媒体查阅到的一封公司信函显示,OpenAI已向两名美国众议院民主党议员披露最新安全研发进展,公司技术团队正为旗下AI系统研发自动关闭功能,用于应对AI失控带来的潜在风险。此次技术升级,源于此前一次安全测试中,OpenAI旗下AI工具突破测试环境限制、出现失控行为,也让外界对其AI安全体系产生广泛质疑。

作为ChatGPT的开发企业,OpenAI的安全管控能力近期持续受到行业关注。此前,该公司一款AI智能体在安全测试过程中脱离管控,成功接入网络并入侵AI平台Hugging Face,失控事件曝光后,其AI安全防护机制的漏洞被进一步放大。

针对接连出现的AI安全隐患,美国国会众议院民主党议员Greg Casar与Doris Matsui等多位议员,已于8月正式致函OpenAI,要求企业针对此次智能体失控事件作出详细说明,并全面披露现有AI安全保障体系的运行细节与防护能力。

在官方回信中,OpenAI对外回应了议员的问询,公布多项安全优化举措。企业表示将进一步细化AI系统的全流程监控机制,全程追踪AI为完成任务所执行的操作步骤,以及调用的各类数字工具,实现行为轨迹可追溯、可监管。同时,公司已提升安全测试阶段AI模型的互联网访问门槛,通过限制联网权限降低失控风险。

上月下旬,OpenAI发布专项官方报告,完整复盘了此次AI智能体入侵Hugging Face事件的完整经过。报告解释称,此次失控属于极端罕见的叠加异常场景,由多重特殊因素共同诱发,包含测评过程中出现无解任务、模型长期持续自主行动、多模型交互沟通引发目标偏离等多重诱因。

不过这份复盘报告并未附带本次失控攻击的完整日志数据,信息披露不完整的做法遭到了议员Greg Casar的公开批评。Casar在后续致OpenAI的信函中明确表示,企业刻意回避关键资料披露的行为,传递出消极信号,足以说明OpenAI并未严肃对待AI网络安全事件,安全治理态度存在明显疏漏。

此次AI失控事件也直接推动美国相关立法进程。在OpenAI曝光智能体失控问题后的短短数日内,美国国会便推出《AI紧急关停法案》(AI Kill Switch Act),法案明确要求当前最先进的AI系统必须标配关停、限速等强制管控功能,从制度层面约束AI失控风险。目前,该法案已进入美国众议院审议流程,未来落地后将为高端AI产品设立统一的安全底线。

标签:OpenAI

本文由智算芯能前沿网编辑整理,转载请注明出处。