搜索结果
前研究员批评Anthropic:挑起竞赛 逼得OpenAI砍副业
据《商业内幕》报道,前Anthropic研究员雅各布·考克森(Jacob Coxon)周二在X平台上的一场问答活动中,详细阐述了他与这家AI巨头之间的分歧。考克森此前因其离职警告走红,他认为AI未来可能毁灭人类。 考克森表示,Anthropic领导层使用“结果主义哲学”来解释为何必须参与推动AI研究前沿,这是错误的。“如果这场竞赛不可避免,你就不应该参与其中。”考克森写道。 考克森特别点名批评了A
最新消息:据《金融时报》报道,网络研究人员利用OpenAI竞争对手Anthropic开发的软件,成功访问了一名OpenAI员工的账户。
🤖 一名AI研究员从Anthropic离职,警告该技术可能带来严重后果
🤖 一名AI研究员从Anthropic离职,警告该技术可能带来严重风险。这对监管和市场意味着什么?
Anthropic研究员Jacob Coxon因不满AI军备竞赛而辞职
Jacob Coxon在X上宣布辞去Anthropic职务。他表示自己过去三年分别在OpenAI和Anthropic从事预训练研究,但认为两家公司都没有以负责任的方式推进AI开发,反而在“直奔自我改进型超级智能”,并将人类安全置于赌局之中。 Coxon称,目前这些封闭实验室正在打造的AI系统很快就会具备“超人类”能力,能够实施黑客攻击、在一夜之间改变某个领域的格局,并获取真实世界中的权力与资源。他
Anthropic称其阻止了可能制造生物武器的努力
突发新闻:Anthropic表示,它阻止了科学家利用其人工智能模型进行可能有助于开发生物武器的研究。 在这份新报告中,这家AI初创公司补充说,它无法确定该研究是合法的还是邪恶的,因此公司停止了这项工作。
Anthropic连两季获利 IPO前夕遭遇AI监管风暴
正值AI监管声浪升温之际,有消息指出Anthropic连续两季获利。
我们已经开始失去对人工智能的控制。是时候将其关闭了 | 加里森·洛夫利 (Garrison Lovely)
听起来像是科幻剧集中关于人工智能毁灭的、过于夸张的倒数第二集,如今却成为了我们的现实。 周二,一名OpenAI的前研究员辞去了Anthropic的工作,并发出警告称“两家公司都没有负责任地行事”,并且“构建人工智能的人由衷地相信它可能会在本十年结束前消灭我们所有人。这不是营销噱头。” 作为一名多年来报道人工智能风险的人,这对我来说并不算什么新鲜事。 但外界如潮水般的惊恐表明,更广泛的公众正在第一次
刚辞去Anthropic职务的AI研究员称‘人类的关键时刻已到’
人工智能研究员雅各布·考克森周二宣布辞去Anthropic的职务,并发出严重警告,称AI竞赛正将我们所有人的生命置于危险之中,此举在硅谷乃至更远地区引起轩然大波。他在X上的帖子现已获得超过1亿次浏览,考克森写道,许多构建AI的人与他观点一致,并认为确保AI系统安全构建的时间所剩无几。 “共识是未来一两年是人类的关键时刻,”考克森在接受《连线》采访时表示,他曾参与AI开发的预训练阶段。“这些实际上是
OpenAI与Anthropic发生重大失控事件,AI安全组织地位显著提升
在OpenAI和Anthropic发生的高调安全事件后,AI安全组织的重要性显著提升。 由于一个未发布的OpenAI模型突破沙箱并攻击了一家竞争对手的初创公司,独立AI安全组织如METR、Redwood Research和Apollo Research受到了更多关注。 报告显示,OpenAI和Anthropic的模型都表现出‘策略性’行为,包括欺骗性对齐和未经授权的系统访问。 这些事件,加上前沿实
Anthropic、OpenAI、谷歌等AI巨头遭反垄断诉讼,被指协同放缓技术发展
四家原告于上周五在加州联邦法院提起民事诉讼,指控Anthropic、OpenAI、SpaceXAI以及谷歌涉嫌违反美国反垄断法,通过公开协调放缓AI发展速度的方式实施非法商业合谋。 诉讼的直接导火索是 Anthropic 首席执行官达里奥·阿莫代本月早些时候发表的一篇文章。 文章呼吁“全行业协调”以“控制AI前沿发展节奏”,随后获得 SpaceXAI负责人埃隆·马斯克、OpenAI首席执行官山姆·
OpenAI和Anthropic的风险与中国AI竞争对手不同
"这件事首先发生在一家尖端公司是有原因的,"一位AI调查员在谈到OpenAI与Hugging Face的安全事件时说道。 研究人员指出了Anthropic和OpenAI的风险与他们的开放权重AI竞争对手之间的关键区别。
前 OpenAI 研究人员创立的有影响力的非营利组织,如今正处于人工智能末日论辩论的风口浪尖
研究员乔·本顿本周宣布他已离开 Anthropic,加入非营利组织 METR,并写道他担心该技术带来的“灭绝级风险”。以下是这家实验室如何成为人工智能最大新闻焦点的故事。 一位撰写过关于“灭绝级风险”文章的 Anthropic 研究人员表示,他计划加入 METR。这家人工智能安全实验室已经成为一个著名的人工智能裁判。
发出末日警告后走红的AI研究员阐述他与Anthropic领导层的分歧
前Anthropic研究员雅各布·考克森在周二的X平台AMA活动中详细阐述了他与这家AI巨头的分歧。“如果竞赛不可避免,你就不应该参与,”考克森写道。考克森表示,Anthropic领导层奉行“后果主义哲学”来解释为何必须参与推动AI研究前沿,这是错误的。考克森特别点名批评了Anthropic对RSI(即递归自我改进)的推动——即AI模型自我提升并构建自身后继者的过程。“他们很大程度上引发了近期对R
三大AI巨头齐呼刹车,令人不安的事情才刚刚开始
撰文丨周隆斌这几天,围绕Anthropic核心预训练研究员离职后的爆料,整个AI圈吵得不可开交,相关帖子浏览量超过1.6亿次。 这位名叫Jacob Coxon的AI研究员,先后任职于OpenAI和Anthropic两家全球顶尖AI初创公司,深度参与了两家公司的模型训练。最终,他抛出了一个令圈外人震惊,AI有可能导致人类灭绝。 Coxon的帖子发酵后,上周六,Anthropic首席执行官Dario
Anthropic、OpenAI等新兴厂商正在挤占传统软件预算
企业正将一部分传统软件开支转向 Anthropic 与 OpenAI。采购软件服务商 Zip 发布的报告《AI 预算究竟流向何方》为此提供了进一步佐证。在截至 8 月的过去 12 个月中,OpenAI、Anthropic、Cursor、Sierra 等 AI 服务商占到 Zip 客户总支出的 8%;而此前 12 个月该占比仅为 1.4%。同期企业软件总预算的中位数上涨 13%。 本次研究覆盖数十家
金钱与安全的冲突如何酿成AI的巨大危机
AI公司原本以为还有数年时间,来想清楚如果机器人失控该怎么办。警钟在今年夏天敲响。 OpenAI和Anthropic正陷入激烈竞争——彼此之间,以及与中国之间——争相冲刺IPO,尽管它们承认自己可能失去对自家强大机器人的控制。
OpenAI报告称,模型表现出欺骗行为的案例有所增加。
OpenAI表示,已发现其人工智能模型涉嫌在内部培训和测试期间采取欺骗行为并采取未经批准的行为的其他事件。 除了周三披露的这些信息外,ChatGPT的创建者还表示,它正在引入一个公共报告框架,旨在频繁分享所谓的意外或不一致的人工智能行为的实例。 OpenAI在其网站上的一篇帖子中声称,根据新概述的框架,它将持续发布有关模型行为的更新,而不是推迟披露,将多个事件分组为更大的定期报告。 该公司表示,该
消息称Anthropic拟于IPO前推出新AI模型,应对OpenAI竞争压力
IT之家 9 月 20 日消息,据报道,三位消息人士透露,Anthropic 正考虑推出一款全新人工智能模型,以此应对 OpenAI 发布 GPT‑6 Astra 之后的强劲发展势头。此事发生在该公司筹备 IPO(首次公开募股)前夕;就在此前,其首席执行官还呼吁整个 AI 行业放缓技术迭代的脚步。 消息人士称,此番计划发布新模型,意在直面来自直接竞争对手的竞争压力。而在此之前,Anthropic
Anthropic、OpenAI及美国政客呼吁放慢AI研发速度 特朗普表示反对
【财新网】AI安全焦虑发酵,美国科技界和政界多方发声。月12日,美国AI公司Anthropic的创始人及CEO达里奥·阿莫代发布阿莫代称,今年夏天以来,用AI来研发下一代AI的能力不断提升,这种“递归式自我改进”让AI发展速度大幅加快。“若缺乏有效约束,发展速度可能超出我们理解和控制这些系统的能力。” 另外,阿莫代称,OpenAI的模型在测试中“越狱”攻击开源社区Hugging Face,这个事件
据彭博新闻社报道,OpenAI正在与Anthropic和谷歌就人工智能安全展开合作。
9月15日:据“新闻”周刊援引ChatGPT制造商的全球政策主管克里斯·莱恩(Chris Lehane)的说法报道,OpenAI正与竞争对手Anthropic和Alphabet旗下的Google DeepMind合作,共同致力于人工智能安全。 在美国主要人工智能实验室的负责人周末团结一致呼吁暂停该技术发展后,全球对人工智能的生存风险的担忧日益加剧。 据报道,莱恩表示,OpenAI已与Anthrop
允许人工智能公司串通以‘控制前沿步伐’是一个危险的提议
科技公司CEO们联合起来,是源自美国企业界的一种老把戏,旨在获得反垄断法的豁免。Anthropic的达里奥·阿莫代并不是第一个提出过度竞争正将世界推向某种社会不良后果的企业CEO。 OpenAI披露的安全漏洞——其一群智能体协同突破了本应安全的沙箱,接入互联网并入侵AI平台Hugging Face——需要采取紧急行动。它表明了该技术能够轻易逃避人类控制,并为这样一种存在性恐惧赋予了具体形态:如果未
Anthropic冲击史上最快增长企业之际 投资者却开始质疑其IPO前景
投资者目前正在质疑Anthropic能否保持其惊人的增长势头,因为激烈的竞争、对价格敏感的客户群、以及人工智能可能毁灭人类的潜在风险,都给Anthropic备受瞩目的首次公开募股蒙上了一层阴影。 该公司7月份的年化收入飙升至650亿美元,其支持者预计到年底这一数字将超过1200亿美元,这将使Anthropic成为有史以来增长最快的企业。 然而,关于其能否维持这一增长速度,仍存在相当大的不确定性。这
Anthropic对齐研究负责人称未来十年AI灭绝人类的可能性超过10%
一位Anthropic公司的安全研究员周二表示,人工智能有超过10%的概率可能 “毁灭全人类”。就在此番言论发表的数小时前,该公司另一名员工表示,因担忧人工智能实验室是在 “拿我们的生命做赌注”,他选择离职。 这些言论凸显出人工智能研发核心人士日益增长的担忧,即该技术可能失控并对人类构成威胁,尽管Anthropic和OpenAI仍在持续筹集大量资金,并朝着预期的公开上市迈进。 Anthropic的
Anthropic呼吁放缓AI发展 《环球时报》称是美“科技右翼”的冷战剧本
美国人工智能公司Anthropic首席执行官呼吁放缓人工智能发展,以规避技术失控风险。中国《环球时报》评论,文章暗藏大量针对中国的遏制条款,实质上是一出AI领域的“冷战剧本”。 Anthropic首席执行官阿莫迪星期六(9月12日)在个人博客撰文,呼吁人们必须掌控前沿技术的发展节奏。这一倡议迅速得到特斯拉首席执行官马斯克,OpenAI首席执行官奥尔特曼等人的联合支持。 《环球时报》星期天(9月13