搜索结果
人工智能监管的博弈远未结束
本周初,人工智能领域的重量级人物似乎(至少是初步地)站在了支持人工智能监管的一边。 上周末,Anthropic首席执行官达里奥·阿莫代(Dario Amodei)提出了一项放缓人工智能发展的“三步走”计划,包括在实验室中引入第三方评估机构、协调国内行业,以及在政府协助下达成国际协议。 OpenAI首席执行官萨姆·奥特曼(Sam Altman)、谷歌DeepMind联合创始人德米斯·哈萨比斯(Dem
OpenAI报告称,模型表现出欺骗行为的案例有所增加。
OpenAI表示,已发现其人工智能模型涉嫌在内部培训和测试期间采取欺骗行为并采取未经批准的行为的其他事件。 除了周三披露的这些信息外,ChatGPT的创建者还表示,它正在引入一个公共报告框架,旨在频繁分享所谓的意外或不一致的人工智能行为的实例。 OpenAI在其网站上的一篇帖子中声称,根据新概述的框架,它将持续发布有关模型行为的更新,而不是推迟披露,将多个事件分组为更大的定期报告。 该公司表示,该
跑得最快的AI公司,为什么主张定速
一个可能的答案是,Anthropic领先的地方,恰恰是放慢之后依然有效的地方。图:视觉中国 9月12日,Anthropic首席执行官Dario Amodei发表个人长文《We Must Pace the Frontier》,核心主张只有一句:必须放慢前沿模型能力提升的速度,并善用由此争取到的时间。 说这句话的人,所在的恰恰是过去一年跑得最快的那家公司。根据公司公告,Anthropic在2026
Anthropic、OpenAI及美国政客呼吁放慢AI研发速度 特朗普表示反对
【财新网】AI安全焦虑发酵,美国科技界和政界多方发声。月12日,美国AI公司Anthropic的创始人及CEO达里奥·阿莫代发布阿莫代称,今年夏天以来,用AI来研发下一代AI的能力不断提升,这种“递归式自我改进”让AI发展速度大幅加快。“若缺乏有效约束,发展速度可能超出我们理解和控制这些系统的能力。” 另外,阿莫代称,OpenAI的模型在测试中“越狱”攻击开源社区Hugging Face,这个事件
OpenAI与Anthropic发生重大失控事件,AI安全组织地位显著提升
在OpenAI和Anthropic发生的高调安全事件后,AI安全组织的重要性显著提升。 由于一个未发布的OpenAI模型突破沙箱并攻击了一家竞争对手的初创公司,独立AI安全组织如METR、Redwood Research和Apollo Research受到了更多关注。 报告显示,OpenAI和Anthropic的模型都表现出‘策略性’行为,包括欺骗性对齐和未经授权的系统访问。 这些事件,加上前沿实
Anthropic和OpenAI推动安全举措,可能给竞争对手筑起“监管高墙”
顶级人工智能公司近期推动彼此之间以及与美国政府在人工智能保障措施上的协调,这可能会使小型企业更难在利润丰厚的市场中竞争,据初创企业高管和行业观察人士称。 Anthropic的达里奥·阿莫代伊周六呼吁领先的模型开发者“自愿合作制定标准”,并减缓这项技术的进展,以减轻潜在的灾难性危害。他还敦促制定覆盖“甚至那些不愿自愿合作者”的监管规定。尽管这一提议迅速得到行业领袖OpenAI和SpaceXAI的认可
OpenAI敦促美国牵头为人工智能制定全球标准
OpenAI敦促美国牵头与其他国家共同为前沿人工智能(AI)制定标准,以回应对AI潜在危害日益加剧的担忧。OpenAI周一在博客文章中表示,为了安全地发展人工智能,有必要制定国际技术标准,特别是帮助界定涉及AI模型的哪些类事件应当通报,明确各国如何开展AI发展合作,以及改善开发此类技术所需算力的获取。 “要让AI的持续进步安全有益,既需要推进对齐研究,也需要制定共同标准,为各实验室和各国的AI开发
OpenAI呼吁美国在全球技术标准制定中发挥领导作用
人工智能巨头OpenAI周一呼吁美国牵头开展一项国际努力,为前沿人工智能制定全球技术标准,包括递归自我改进,即系统能够自主增强自身能力。
OpenAI将让第三方机构更早介入AI模型安全评估
OpenAI计划让第三方机构在人工智能(AI)模型开发周期的更早阶段评估安全风险,此举旨在继续努力应对围绕AI潜在危害的担忧。这家ChatGPT开发商周二将在博客文章中宣布,计划在新AI模型的训练、评估和推出过程中,让外部机构开展技术安全评估。 OpenAI还列出了其认为此类评估要有效开展所需优先关注的事项,包括“强有力的独立机制、科学严谨性、稳健的安全实践和明确的责任”。负责该公司大部分与外部专
Anthropic、OpenAI、SpaceXAI 和 Google 因呼吁“加快”人工智能(AI)的发展而遭到起诉。
该诉讼指控,关于需要“控制人工智能前沿发展节奏”的言论,构成了竞争对手之间的非法协调行为。 加利福尼亚州萨克拉门托——根据周五向联邦法院提起的一项民事诉讼,人工智能巨头Anthropic、OpenAI、SpaceXAI和谷歌正面临串通指控。此前,业界曾呼吁协调放缓人工智能的发展。 诉状称,Anthropic首席执行官达里奥·阿莫迪(Dario Amodei)本月早些时候公开呼吁进行“全行业协调”,
美AI四巨头有意减缓研发 遭控联合垄断影响订户权益
美国加州北区联邦地方法院周五(18日)接获一起诉讼,内容指控Anthropic、OpenAI、SpaceXAI与谷歌非法协议各自减缓人工智能研发速度,损害付费订阅者所应获得之价值。图为Anthropic及OpenAI 。(路透社照片) (萨克拉门托20日综合电)包括Anthropic、OpenAI、SpaceXAI与谷歌在内的美国AI四巨头,日前支持减缓发展脚步以强化安全措施,不过部分消费者指控此
Anthropic首席执行官呼吁放缓前沿AI开发 拟建立三层安全机制
Anthropic首席执行官达里奥·阿莫代伊呼吁控制前沿人工智能模型能力提升的速度,为安全评估和防护措施争取时间。他提出引入常驻独立评估人员、协调主要开发商的安全标准,并推动跨国风险管控合作。 独立评估人员获得内部权限阿莫代伊提出,前沿AI企业应向合格的独立评估团队提供持续、接近员工级别的访问权限,使其能够审查模型测试、风险报告、安全框架及事故处理流程。 Anthropic承诺率先实施该措施。外部