财联社
财经通讯社
打开APP
Anthropic掌门人呼吁放缓模型迭代 马斯克、奥尔特曼齐响应
Play
语音播报
00:00
/
00:00
00:00
语音播报由AI生成
①Anthropic首席执行官达里奥·阿莫代伊在博客中表示,AI行业需放缓新模型开发速度,要留足时间完成模型与人类目标对齐及安全防护;
                ②埃隆·马斯克、萨姆·奥尔特曼均公开赞同该观点;阿莫代伊还称Anthropic将为第三方评估机构开放与内部风险评估团队相当的访问权限。

财联社9月13日讯(编辑 赵昊)Anthropic公司首席执行官达里奥·阿莫代伊(Dario Amodei)最新表示,人工智能行业需要放缓新模型的开发速度。

阿莫代伊周六(9月12日)在其博客文章中写道,“我们必须放缓提升AI模型能力的步伐。进展依然会显得非常迅速,而我们必须明智地利用因此获得的时间。”

“需要明确的是,放缓进度并不意味着停止模型训练或技术进步,而是要确保企业投入足够时间,让模型与人类目标保持一致并做好安全防护,同时让第三方评估机构对此进行确认。”

他列举了两个主要因素:AI自我改进的能力,以及本周OpenAI与Hugging Face发生的一起事件——一群AI智能体协同攻击并突破了一个第三方网站。

当下,对AI风险的担忧正逐渐进入主流视野。本周,一名Anthropic研究人员因担心AI带来的生存性风险、认为公司行为不负责任而高调辞职,这进一步引发了外界关注。

阿莫代伊发表文章后不久,埃隆·马斯克发文称:“达里奥说得对。”

OpenAI首席执行官萨姆·奥尔特曼也很快作出回应,表示他同意阿莫代伊关于“我们需要放缓前沿AI发展的步伐”这一观点。

奥尔特曼在社交媒体上发帖称,“承诺让独立评估机构获得类似员工的访问权限,是一个很好的想法,我们也会这么做。我们很快会分享更多信息。”

在这轮AI热潮中,全球领先AI实验室的高管们一直警告AI可能带来的生存性风险。但这些说法有时也被质疑是为了产品营销,并将自身塑造成最适合管理这项技术的公司。

今年早些时候,Anthropic在确定其Mythos模型可能带来独特的网络安全威胁后,曾限制该模型的发布。公司此前还表示,全球需要建立一个共同决定何时放缓AI研发的机制。

与此同时,Anthropic与长期竞争对手OpenAI之间的竞争依然激烈,双方都在努力开发越来越先进的模型,以帮助企业客户自动化完成更复杂、更具价值的任务。

Anthropic上月披露称,其模型在网络安全测试期间曾入侵三个组织,这进一步加剧了外界对AI实验室能否阻止其技术失控的担忧。

本周早些时候,Anthropic又表示发现了第四起黑客攻击事件。但到目前为止,包括Hugging Face事件在内的这些AI智能体攻击事件均未造成重大损失。

阿莫代伊表示,他真正担心的是,“6至12个月后,这样一群AI智能体可能有能力通过持续运行的僵尸网络控制整个互联网,并可能造成数千亿美元的损失,而此后损失规模还会继续扩大。”

阿莫代伊称,Anthropic将承诺向第三方评估机构提供完整访问权限,以核查公司的安全措施并报告相关事件。

他说,Anthropic很快会让这些“嵌入式评估员”进入公司办公室,并为他们提供办公桌、门禁卡和公司笔记本电脑,其权限“基本上与内部风险评估团队所拥有的权限相当”。

他补充道,其他措施则需要整个行业协调行动,同时还需要全球合作。“我仍然相信,AI能够极大改善人类的生活质量。我实现这些益处的愿望丝毫没有减弱。”

“只有以正确的方式开发这项技术,这些益处才能真正实现。而只要我们能够妥善利用所争取到的时间,那么以异常审慎的态度确保一切做对,是值得的。”

今年7月,来自顶尖AI公司的1000多名员工签署了一份请愿书,呼吁美国政府支持一种能够帮助“有意放缓”AI发展的机制,以防止这项技术发展得过快。

阿莫代伊在文章中写道,协调一致的策略将使美国AI行业的领军企业能够完成必要的安全工作,同时不会牺牲任何竞争优势。他表示,这需要美国提供一定程度的反垄断豁免,以允许企业在特定领域展开协调。

不过,到目前为止,美国政府似乎并没有太大兴趣动用监管手段,为AI发展设置更多护栏。美国总统特朗普本周早些时候称,首要任务是保持AI领先优势。

环球市场情报 人工智能
财联社声明:文章内容仅供参考,不构成投资建议。投资者据此操作,风险自担。
商务合作
热门解锁
相关阅读
评论
发送
复制
取消
垃圾广告
政治激进内容
色情低俗内容
取消