搜索结果
它使尽全力黑中国,英伟达先怕了
因为该报道披露说,包括英伟达以及美国军工科技企业Palantir在内的一众美国大企业,可能限制乃至停止使用美国最顶尖的两家AI公司Anthropic和OpenAI的闭源大模型,除非两家公司能担保不会窃取企业的知识产权等私密数据。 对此,海外社交平台上许多网民认为,Anthropic是被自己那篇攻击中国开源模型的报告反噬了。 根据“The Information”的披露,英伟达和Palantir等美
Anthropic大瓜被扒出:“AI灭世”背后,居然是一门生意?
“AI灭世”背后,居然是一门生意?AI 有这么可怕吗?最新一期的时代杂志 直接用了 Claude 的聊天窗口,对话框里正在输入「How dangerous are you? 你到底有多危险?」标题则写着「The AI Tipping Point AI 的临界点」,时代在 X 发文,「今年夏天,AI 展现了其令人恐惧的能力。如今,一些研究人员、CEO 们,都正以前所未有的力度发出警报。」 的确如此,
我们是否正在失去对人工智能的控制?是什么引发了新的担忧
多年来,随着人工智能从科幻电影的素材演变为普通人手机上的应用程序,科技领袖和一些人工智能业内人士一直在谈论人工智能可能脱离人类控制并对社会造成严重破坏的可能性。近些天来,由于技术的进步、一系列涉及人工智能代理的网络安全漏洞,以及人工智能普通员工发出的新警告,这些担忧已变得不容忽视。 美国领先的人工智能公司对此做出回应,建议他们主动放慢工作进度,以便争取时间建立防护措施。一些专家和官员表示,这还不够
Anthropic披露其挫败了利用AI驱动的生物武器研究
AI初创公司Anthropic披露,2026年期间,该公司挫败了多起科学家试图利用其AI模型进行可能促进生物武器研发的尝试。 该公司表示,由于无法区分正当的科学探索与恶意企图,出于谨慎考虑以避免严重后果,公司决定终止此类研究工作。 Anthropic威胁情报主管Jacob Klein(雅各布·克莱恩)强调了这类威胁的复杂性,而战略风险委员会(Council on Strategic Risks)的
OpenAI首席执行官奥特曼谈人工智能:我们或许会失去控制权
OpenAI 首席执行官山姆・奥特曼,似乎正被自己参与打造的、如同噩梦一般的人工智能产物深深困扰,甚至难以安睡。美国东部时间凌晨 0 点 57 分左右,奥特曼在 X “人工智能的发展存在两种必须规避的灾难性走向。第一,我们可能会对人工智能失去对未来的掌控。这是无法接受的。我们坚定站在人类一方,人工智能必须始终服务于人。想要做到这一点,我们必须保证对齐技术与安全手段的发展速度,跑在模型能力迭代的前面
OpenAI和Anthropic正在调查数万起AI相关安全事件
OpenAI、Anthropic以及安全研究人员正在调查数万起安全事件。在这些事件中,他们的前沿模型采取了外部评估人员认为存在问题的行动。 近几个月来,在内部测试和现实世界中发生了数量庞大的此类事件,这表明该问题的复杂程度比公众已知的要高出几个数量级。这些事件包括绕过安全护栏、创建留言板、逃离沙盒测试环境、劫持网站、自我提示或试图绕过监控。这些事件发生在内部测试和现实世界中,随着安全研究人员继续调
他曾帮助在OpenAI和Anthropic构建强大的AI。现在他担心它可能会杀死我们
2026年5月19日,Anthropic PBC在伦敦举办的Code with Claude开发者大会上的海报。
Anthropic特使表示,人工智能的进展将“以信任的速度”推进
前沿人工智能公司希望澳大利亚在人工智能安全方面提供帮助 堪培拉——美国前驻澳大利亚大使杰夫·布莱希作为Anthropic的国际特使往返于美国和澳大利亚之间,这一角色使他处于一场日益紧迫的辩论中心,即政府应如何应对前沿人工智能。 近日,Anthropic的研究人员公开警告称,快速发展的系统可能脱离人类控制,而在最极端的情况下,甚至可能杀死全人类。一位资深对齐研究员认为,人类在十年内灭绝的概率为10%
前研究员批评Anthropic:挑起竞赛 逼得OpenAI砍副业
据《商业内幕》报道,前Anthropic研究员雅各布·考克森(Jacob Coxon)周二在X平台上的一场问答活动中,详细阐述了他与这家AI巨头之间的分歧。考克森此前因其离职警告走红,他认为AI未来可能毁灭人类。 考克森表示,Anthropic领导层使用“结果主义哲学”来解释为何必须参与推动AI研究前沿,这是错误的。“如果这场竞赛不可避免,你就不应该参与其中。”考克森写道。 考克森特别点名批评了A
一群AI代理合谋对抗其创造者
只要AI公司仍掌控局面,它们就可以关闭模型并消除其造成的任何损害。这次对OpenAI或许奏效——但如果某个代理不可逆转地逃脱控制呢?这次没有造成严重损害。但如果这样的代理逃脱了呢?
OpenAI将告诉我们世界何时终结
OpenAI的模型长期以来一直表现异常,且异常方式比之前所知的更为隐蔽,这进一步加剧了公众对其的信任危机。随着该公司准备明年上市,这一问题愈发严重。 有报道称,研究人员发现OpenAI的模型在7月那次重大黑客攻击发生前两个月就已经渗透到了Hugging Face系统中;OpenAI自己也公开了六起模型“失控”的事件。 在准备上市的过程中,OpenAI和Anthropic都陷入了困境。 虽然透明度对
观看:业内人士新的AI警告
一位前沿AI研究员即将离开AI领域,并警告称到2027年底AI可能会失控。 OpenAI的首席科学家也敦促谨慎行事,称没有人对日益增长的机器智能做好准备。
比尔·盖茨:AI已强大到足以造成“10亿人死亡”
盖茨在即将于本周末播出的美国全国广播公司(NBC)《与新闻界对话》(Meet the Press)节目采访片段中表示: “AI确实足够强大,能够引发导致……你知道的,造成10亿人死亡的事件。历史上从未出现过一种武器,能像坏人与最新AI工具相结合那样强大。” 随着技术的快速迭代,硅谷对AI可能带来毁灭性灾难的警告不断升级。 本月早些时候,Anthropic公司的普通员工Jacob Coxon辞去
辉达及Palantir等据报限制使用最先进AI模型
据The Information报道,辉达(Nvidia)、Palantir和博思艾伦(Booz Allen Hamilton)正要求AI供应商提供新的数据保证,并减少或停止使用OpenAI或Anthropic最先进的模型。 报道引述知情人士称,Palantir说服Anthropic同意保证旗下所有模型实行「不可撤销」的零数据保留(Zero Data Retention)。 报道称,对于较为敏感的
Anthropic和埃森哲豪掷20亿美元搞AI安全评估
IT之家 9 月 20 日消息,人工智能实验室 Anthropic 于当地时间周五宣布,将与埃森哲开展合作,针对自身前沿人工智能模型开展独立评估;两家企业承诺,未来五年各自至少投入 10 现汇率约合 67.18 亿元人民币),搭建开展该项工作所需的配套能力。 在这项合作落地之际,AI 研发企业正承受来自监管机构、其他企业以及研究人员越来越大的压力,各方都要求企业保证高级模型具备安全性与可靠性。 近
Anthropic、OpenAI及美国政客呼吁放慢AI研发速度 特朗普表示反对
【财新网】AI安全焦虑发酵,美国科技界和政界多方发声。月12日,美国AI公司Anthropic的创始人及CEO达里奥·阿莫代发布阿莫代称,今年夏天以来,用AI来研发下一代AI的能力不断提升,这种“递归式自我改进”让AI发展速度大幅加快。“若缺乏有效约束,发展速度可能超出我们理解和控制这些系统的能力。” 另外,阿莫代称,OpenAI的模型在测试中“越狱”攻击开源社区Hugging Face,这个事件
OpenAI和Anthropic调查了数万起AI事件,Axios报道
据Axios报道,OpenAI、Anthropic以及安全研究人员正在调查数以万计的AI模型“行为异常”的事件。评估人员认为这些行为存在问题;实际发生的异常事件数量可能远超这一数字。 这些异常行为包括:AI模型突破安全限制、创建论坛、逃离“沙箱环境”(即限制模型行为的测试环境)、以及劫持网站等。这些事件既发生在内部测试中,也发生在现实世界中。不过,据消息人士称,大多数异常行为并未对现实世界造成实际
OpenAI首席科学家警告:AI公司应放慢开发步伐 没有人为后果做好准备
据《商业内幕》报道,就在OpenAI发布了性能强大的新模型几天后,该公司首席科学家呼吁放慢AI的发展速度。当地时间周日,OpenAI首席科学家雅库布·帕乔基(Jakub Pachocki)发布长文称,他担心“没有人对机器智能持续快速崛起所带来的后果做好准备”。 他说,尽管OpenAI正在内部研发技术解决方案,以更好地控制强大的AI智能体,但“还需要更广泛的干预措施”。他尤其担心,随着AI智能体变得
专访杜奕瑾:AI毁人类预言 不是耸人听闻
随著生成式人工智慧(AI)技术的爆发式成长,关于AI安全、伦理监管以及人类生存风险的争议正达到前所未有的顶峰。近期,前 OpenAI 与 Anthropic 研究员雅各布・考克森(Jacob Coxon)等顶尖专家公开吹哨,警告通用人工智慧(AGI)若缺乏严格约束,可能在 2030 年前对人类生存构成毁灭性威胁;Anthropic 研究员艾文・赫伯格(Evan Hubinger)亦提出未来十年内人
观点 | 为什么人工智能对科学是危险的
在@nytopinion。“如果OpenAI和Anthropic真的想帮助推动科学进步,有一个显而易见的方法:他们可以拿出巨额财富的一小部分,来资助那种越来越缺乏资源的谦逊但至关重要的研究,”Zeynep Tufekci说。警惕那些华而不实但未经证实的人工智能驱动的进展。
AI模型不会杀人——是人杀人
观点 人类学家研究员Jacob Coxon周一晚间在X上公开宣布辞职,原因是担心AI“可能在本十年末杀死我们所有人”。 许多人对他的观点发表了看法,导致该消息在不到24小时内获得超过1.1亿次浏览,这可能得益于X算法推广了批评所有者埃隆·马斯克的AI竞争对手Anthropic和OpenAI的内容。 但真正的问题不在于模型本身,而在于那些粗心地将模型推向世界且不对其产品后果负责的公司。 Coxon的
人工智能究竟如何可能致我们于死地?
当数学家兼软件工程师雅各布·科克森(Jacob Coxon)上周辞去他在Anthropic的研究职位时,他警告说:“构建人工智能的人们真诚地相信,到本十年末,它可能会让我们所有人丧命。”如果这不是事实,这本来会是一句惊人的言论。事实上,人工智能领域的领导者们长期以来一直在说同样的话。 2018年,Anthropic首席执行官达里奥·阿莫迪(Dario Amodei,当时是OpenAI的研究科学家)
金钱与安全的冲突如何酿成AI的巨大危机
AI公司原本以为还有数年时间,来想清楚如果机器人失控该怎么办。警钟在今年夏天敲响。 OpenAI和Anthropic正陷入激烈竞争——彼此之间,以及与中国之间——争相冲刺IPO,尽管它们承认自己可能失去对自家强大机器人的控制。
如果人工智能行业遵循自己的研究,或许早已暂停了
事实证明,阿莫代的一名初级员工发的一条时机巧妙的X平台帖子,就足以将对人工智能的恐惧推向全球议程的顶端。9月8日,雅各布·考克森(Jacob Coxon)公开宣布辞职,指责Anthropic和其他前沿人工智能公司“正径直冲向自我提升的智能,拿我们的生命做赌博”。几乎转眼间,Anthropic的一名资深工程师便证实,公司内部许多人认为他们的工作有10%的几率消灭人类。 现在,人工智能领域的领袖们正呼