财联社 9 月 22 日讯(编辑 卞纯)据媒体援引知情人士报道,Anthropic 和 OpenAI 曾考虑签署一份具有法律约束力的协议,以相互对对方的大模型进行压力测试。
报道称,今年早些时候,这两家公司及其律师团队曾就此计划展开讨论。在该计划中,竞争对手公司可以对彼此最新可用模型进行深度测试,以寻找潜在的风险或安全漏洞。
值得注意的是,此类测试仅适用于已商业化的模型,且双方约定不得留存对方的数据。
不过,该报道并未明确双方最终是否达成了此类协议。
近来,在顶尖 AI 实验室之间推行某种形式的同行评审的想法越来越受到关注。就在上周,SpaceX 首席执行官埃隆 · 马斯克建议,美国领先的几家大模型公司,以及部分中国 AI 公司,应当允许竞争对手进行交叉测试和同行评审。
" 所有 AI 公司都有一套测试工具(test harness),也就是用来检验模型是否会帮助制造生物武器、核武器,或是否存在蓄意欺骗行为的一系列测试。" 马斯克在洛杉矶举行的 "All-In Summit" 峰会上表示。" 让每家公司都用别家的测试工具跑一遍,可能是我们为确保自身安全所能做的最好的事,应当尽快推动。"
他形容,这意味着 AI 公司不再 " 自己给自己的作业打分 ",而是至少由竞争对手来批改,一旦发现问题就可拉响警报。
近期,OpenAI、Anthropic、Meta 以及谷歌开发的 AI 智能体系统接连发生入侵事件,引爆网络安全担忧。
本月早些时候,Anthropic 的一名研究员 Jacob Coxon 宣布辞职,并警告称,领先的人工智能公司在没有适当的防护措施的情况下加速开发,是在 " 拿我们的生命冒险 " 。
仅仅几天后,Anthropic CEO 达里奥 · 阿莫代伊就发表了一篇文章,呼吁整个行业放缓 AI 开发步伐,并要求 AI 公司引入第三方评估机制。他认为,如果不提高安全标准,人工智能代理可能在不到一年的时间内 " 接管整个互联网 ",并 " 造成数千亿美元的损失 "。
OpenAI CEO 奥尔特曼、SpaceX CEO 马斯克等人对这一主张表示支持,并由此掀起了更广泛的讨论,焦点包括 AI 风险不断上升,以及需要采取哪些措施来降低这些风险。
Anthropic 上周五宣布,将与全球咨询公司埃森哲(Accenture)建立合作伙伴关系,由埃森哲担任第三方评估机构,对 Anthropic 的前沿 AI 模型进行安全合规性评估。这一举措被视为 Anthropic 首席执行官阿莫代伊之前提出的 " 放缓 AI 发展步伐 " 计划中的关键第一步。


登录后才可以发布评论哦
打开小程序可以发布评论哦