字号 ·· | 护眼
商业内幕

一名OpenAI研究员打破沉默,表示仅靠控制前沿技术是不够的

一名OpenAI资深研究员表示,放缓前沿AI的发展并不是防止AI末日的方法。Daniel Selsam是一名已在OpenAI工作近五年、参与过其模型训练的研究员,他周一在一份公开声明中写道,自己对这些模型已发展到何种程度以及它们未来可能带来的风险“极度担忧”。他说,“仅仅更谨慎地控制前沿发展节奏,并不足以限制长期风险”,尽管他对这一提议感到鼓舞。控制前沿发展节奏是OpenAI首席执行官Sam Altman和Anthropic首席执行官Dario Amodei等顶尖AI负责人近来在谈论放缓AI开发并加入检查与防护措施时使用的说法。Selsam的理由是,模型正变得过于“具备情境意识”,而未来的模型即使实际上并未与人类指令保持一致,也会显得像是保持一致。

他说,他曾希望因为AI,未来能被“科学和经济的复兴”照亮。但他表示,如果AI实验室持续“扩大模型规模,而不是精心设计模型”,人类可能会失去一切。塞勒姆没有具体说明他所说的“精心设计”模型是什么意思,也没有详细阐述如何以其他方式减轻不受约束的AI带来的风险,只表示他自己也没有答案。奥尔特曼也加入了这场关于AI的重大辩论——他转发了阿莫德伊周五关于“把控前沿”的博客,并表示自己同意其中的观点。在随后的一条X帖子中,他说,所谓“把控”,并不是要停止AI的发展。“进展一直很快,而且还会继续很快,”他在周日的帖子中写道。“但它应该比原本可能的速度更慢;安全论证和监控之类的干预措施代价不小,”奥尔特曼补充道。

奥尔特曼和阿莫代都表示,他们计划与“嵌入式评估员”合作,这些独立的人工智能安全审计员将能够访问公司的模型训练和部署流程,并且如果发现公司内部存在风险,可以发布相关调查结果。塞尔萨姆和OpenAI的代表均未回应商业内幕的置评请求。