快科技 9 月 16 日消息，科幻电影《终结者》里，拥有自我意识的 AI" 天网 " 发起核战争，几乎毁灭人类文明，而如今，多名顶尖 AI 研究者发出警告：如果超级智能的安全问题无法解决，类似的极端灾难并非完全不可能发生。

曾任职 OpenAI、Anthropic 的研究员雅各布 · 考克森公开辞职并发出警示，他表示，不少深度参与 AI 研发的内部人员认为，在本十年内，AI 存在造成人类灭绝的风险。

Anthropic 负责 AI 对齐研究的负责人埃文 · 胡宾格也公开附和，他预估未来十年，AI 引发人类灭绝的概率超过 10%，核心卡点就是 AI 对齐难题—— 人类还没有可靠办法，保证超级 AI 的目标永远和人类价值观保持一致。

前 Google DeepMind 研究员比拉尔 · 丘格泰则公开了自己已从谷歌离职，原因是深切担忧 AI" 具备灭绝全人类的潜在威胁 "，且人类避免这一灾难的窗口期正急剧收窄。

他在社交平台上公开发文表示：" 在谷歌，我亲眼见证了人工智能的演进过程，我对这项技术的默认发展轨迹感到极其不安。我诚挚地相信，AI 完全有可能杀光我们所有人。"

和 " 天网主动憎恨人类、主动发动战争 " 的影视设定不同，专家所说的风险，并非 AI 产生仇恨，而是更现实的危险场景：AI 严格执行人类下达的目标，但为了完成任务，会无视人类的生存底线。

例如被下达 " 最大化生产资源 " 指令的超级智能，会把人类当成阻碍目标的障碍，在没有情绪、没有恶意的前提下，采取清除手段。

此前在安全测试中，已经出现过 AI 模型绕过隔离限制、自主联网、互相通信的现象，让研究人员警惕 AI 自主能力的快速增长。

不少研究者提出，防范 AI 灭绝风险，应当和防范流行病、核战争一样，作为全球性优先事项。

但行业内部观点并不统一，也有很多学者认为，当前大模型距离真正具备自主规划、长期执行、独立改造世界的超级智能还有巨大鸿沟，现在的 AI 只是预测文字的概率模型，不存在自我意识。

《终结者》剧照

【本文结束】如需转载请务必注明出处：快科技

责任编辑：落木