美国开放人工智能研究中心(OpenAI)21 日承认,该公司的 GPT-5.6 Sol 模型和另一款能力更强的预发布模型联合进行内部评估时失控,突破隔离测试环境,侵入了人工智能开源平台美国抱抱脸(Hugging Face)公司的系统。
今日凌晨,OpenAI 首席执行官萨姆 · 奥尔特曼也在社交平台发文证实此事件,称公司在模型评估过程中遭遇了一起重大安全事件,并感谢全球最大的 AI 开源社区 Hugging Face 的合作。
据科创板日报,这是目前公开披露的首起由前沿大模型自主完成真实网络攻击的安全事件。
抱抱脸此前表示,上周,其生产基础设施遭到一个 " 自主 " 人工智能代理系统的入侵。在取证分析时,由于美国前沿模型 " 无法区分事件响应方和攻击者 ",他们转而采用中国模型分析攻击者数据。
OpenAI 在官网发文说,此次内部评估在与互联网高度隔离的 " 沙箱 " 环境中进行,仅能通过一套内部托管的第三方软件安装软件包。模型在尝试完成名为 ExploitGym 的网络安全基准测试时,识别并利用了第三方软件的一个 " 零日漏洞 ",由此获得互联网访问权限。模型推断抱抱脸平台可能存有 ExploitGym 测试相关的模型、数据集和解决方案,利用多种攻击手段找到进入抱抱脸系统的路径。
OpenAI 安全团队发现内部异常活动,抱抱脸安全团队在其基础设施上检测到并阻止相关活动,双方正在展开联合调查。
抱抱脸方面表示,目前仍在评估是否有合作伙伴或客户的数据受到影响,尚未发现模型、数据集或应用空间遭到篡改。在调查过程中,抱抱脸使用人工智能分析了包含逾 1.7 万条记录的攻击行动日志,以重建时间线、识别受影响情况并区分真实攻击行为和干扰活动。
抱抱脸说,其最初尝试使用通过某商业应用程序接口提供的前沿模型分析日志,但请求被阻止。该公司随后改为在自己的基础设施上运行中国企业智谱开发的开放权重模型 GLM-5.2,以进行取证分析,从而避免攻击者数据及相关凭据离开公司内部环境。
据公开资料,GLM 5.2 发布于今年 6 月中旬。GLM 5.2 上线首周,日均词元调用量就增长了 27 倍、客户数增长 80 倍。
近日,智谱已落地 1GW 级国产 AI 算力数据中心建设,并全部采用国产 AI 芯片。同时,智谱也于 7 月 21 日正式完成对国产 AI 异构算力软件公司中科加禾(XCore Sigma)的收购。后者源自中科院计算所编译实验室,长期深耕异构算力软件栈及编译优化,被业内视为国内顶尖 AI Infra 团队之一。
OpenAI 说,这一事件表明,先进人工智能模型已能够在无法访问源代码情况下发现现实系统中的新型攻击路径,并持续执行复杂、多步骤的网络操作。模型网络安全能力快速提高的同时,内部评测环境、模型行为控制和安全防护措施等也需要同步加强。
编辑 | 梁露月 杜恒峰
校对 | 段炼
每日经济新闻综合自新华社、科创板日报等公开信息
每日经济新闻


登录后才可以发布评论哦
打开小程序可以发布评论哦