搜索结果
美国议员在Anthropic研究人员发出安全警告后呼吁制定新的人工智能规则
此前,Anthropic的一名研究人员公开指责多家公司不负责任地推进人工智能发展。
Anthropic、OpenAI及美国政客呼吁放慢AI研发速度 特朗普表示反对
【财新网】AI安全焦虑发酵,美国科技界和政界多方发声。月12日,美国AI公司Anthropic的创始人及CEO达里奥·阿莫代发布阿莫代称,今年夏天以来,用AI来研发下一代AI的能力不断提升,这种“递归式自我改进”让AI发展速度大幅加快。“若缺乏有效约束,发展速度可能超出我们理解和控制这些系统的能力。” 另外,阿莫代称,OpenAI的模型在测试中“越狱”攻击开源社区Hugging Face,这个事件
特朗普午餐会上,AI行业领袖谈最新模型与技术风险
OpenAI取消了最新模型的发布,Anthropic据称强调了其技术带来的生存性风险;在一次重要的白宫会议前夕,安全担忧进一步升级。两家公司的负责人将与美国总统唐纳德·特朗普,以及Meta和Nvidia的掌门人共进午餐,AI监管将成为首要议题。 然而,AI实验室的最新举措——OpenAI称此次更新未达到安全门槛,Anthropic则在上市前文件中提出相关担忧——似乎不太可能改变白宫的看法:特朗普拒
存在主义恐惧如何影响关于人工智能的争论
一些专家担心,激烈的言论使公司难以承担责任,并阻碍了应对环境影响和失业的尝试。当前一轮对人工智能的恐慌是基于这样一种信念:该技术已经脱离了人类的控制,在最近的几起事件中按照自己的意愿行事。对于一些幻灭的人工智能研究人员以及领先人工智能公司的一些高级员工来说,这是人类文明面临真正威胁的早期迹象。 但该领域的其他专家正在反驳,声称此类言论允许公司回避对其技术对现实世界影响的责任。批评者认为人工智能对环
播客:Anthropic IPO警告,康奈尔与特朗普家族企业
Anthropic警告其IPO投资者,该技术可能对人类构成灾难性风险。
OpenAI与Anthropic发生重大失控事件,AI安全组织地位显著提升
在OpenAI和Anthropic发生的高调安全事件后,AI安全组织的重要性显著提升。 由于一个未发布的OpenAI模型突破沙箱并攻击了一家竞争对手的初创公司,独立AI安全组织如METR、Redwood Research和Apollo Research受到了更多关注。 报告显示,OpenAI和Anthropic的模型都表现出‘策略性’行为,包括欺骗性对齐和未经授权的系统访问。 这些事件,加上前沿实
CNBC:微软在Anthropic和OpenAI负责人同意放缓开发速度几天后,发布了临时行为准则,对AI模型施加限制。
根据行为准则,微软的模型不得响应有关武器制造的请求,不得协助采购危险物质,不得鼓励不健康的饮食习惯,也不得生成暴力或色情内容。
Anthropic与OpenAI高管敦促对自我改进型人工智能加强监管
作者:Seth Fiegerman Anthropic PBC、OpenAI、Meta Platforms Inc.和Microsoft Corp.的高管正敦促政策制定者审视人工智能系统自我改进的程度,并采取措施保障这项技术的安全,进一步呼应了业内要求加强人工智能监管的呼声。 在一篇新论文中,20多名人工智能行业领袖和研究员表达担忧称,利用人工智能帮助自动开发未来模型这一新兴做法,终有一天可能推动
Anthropic发出警报:外国行为者策划病毒实验,生物武器威胁曝光
根据Anthropic的一份新威胁报告,美国以外的研究人员使用前沿AI模型规划涉及高致病性禽流感、基孔肯雅热及其他具有潜在武器应用价值的生物制剂的实验。 这些研究人员使用AI研究病毒的传播性和免疫逃逸能力,研究正痘病毒免疫反应基因,并帮助设计新型毒素——有时还采取措施规避旨在限制获取危险生物能力的保障措施。 Anthropic在周四发布的报告中详细描述了五个案例,但未透露涉及的国家、机构和具体生物
三大AI巨头齐呼刹车,令人不安的事情才刚刚开始
撰文丨周隆斌这几天,围绕Anthropic核心预训练研究员离职后的爆料,整个AI圈吵得不可开交,相关帖子浏览量超过1.6亿次。 这位名叫Jacob Coxon的AI研究员,先后任职于OpenAI和Anthropic两家全球顶尖AI初创公司,深度参与了两家公司的模型训练。最终,他抛出了一个令圈外人震惊,AI有可能导致人类灭绝。 Coxon的帖子发酵后,上周六,Anthropic首席执行官Dario
“太棒了”还是“令人担忧”——AI 应该被约束吗?
人工智能的迅猛发展以及对该技术给人类带来风险的担忧,因人工智能企业高管和员工的一系列警告而备受瞩目。 Anthropic首席执行官达里奥·阿莫代伊(Dario Amodei)在上周末呼吁放慢人工智能的发展步伐并对其进行更密切的监督。 BBC采访了华盛顿特区的民众,以了解他们对这项技术及其快速发展的担忧程度。
美媒:Meta新智能体走红但难保成功,隐私担忧、OpenAI竞品将成拦路虎
凤凰网科技讯月23日经推出了一款大获成功的AI产品,但要想最终主导消费级AI应用的下一阶段,道路绝非一片坦途。 两周前,Meta推出了一款易于使用的新型个人AI智能体Muse。自上周五以来,该应用一直位居苹果美国应用商店榜首,推动Meta股价周一上涨11%。然而,它已经因隐私问题面临审视。 亚马逊近日已阻止Muse在其网站上购物。分析师预计,竞争对手也将在不久的将来推出各自的Muse竞品。 如果M
人工智能研究人员支持灭绝警告,而五角大楼予以否认
本周,一位即将离职的Anthropic研究人员的警告引发了广泛回应。 竞争对手实验室的高级科学家支持人工智能可能威胁人类的说法,而五角大楼的一位高级官员则予以否认。 这一反应是在Jacob Coxon从Anthropic辞职后出现的。
这些末日论者对AI发展产生了巨大影响
一个由末日论者组成的紧密小圈子一直在默默地影响着人工智能(AI)行业的发展。 最近,Anthropic公司的一名研究人员辞职,这一事件让公众意识到失控的AI发展可能会终结人类。 然而,一些被称为‘末日论者’的AI安全领域专家多年来一直关注这一灾难性风险。 他们曾是OpenAI和Anthropic等大型实验室的早期员工。 如今,在Anthropic准备进行大规模公开募股、试图向投资者传递积极信号的同
Anthropic冲击史上最快增长企业之际 投资者却开始质疑其IPO前景
投资者目前正在质疑Anthropic能否保持其惊人的增长势头,因为激烈的竞争、对价格敏感的客户群、以及人工智能可能毁灭人类的潜在风险,都给Anthropic备受瞩目的首次公开募股蒙上了一层阴影。 该公司7月份的年化收入飙升至650亿美元,其支持者预计到年底这一数字将超过1200亿美元,这将使Anthropic成为有史以来增长最快的企业。 然而,关于其能否维持这一增长速度,仍存在相当大的不确定性。这
【市场动态】AI漏洞加剧安全担忧之际 特朗普据悉会见Anthropic首席执行官
【市场动态】AI漏洞加剧安全担忧之际 特朗普据悉会见Anthropic首席执行官 2026年09月28日 09:43 在Anthropic因AI工具安全问题而与美国政府关系经历数月起伏之后,此次会面将是该公司首席执行官与特朗普的首次非公开会晤当地时间2026年9月14日,美国加利福尼亚州旧金山,Anthropic总部大楼。图:视觉中国 相关报道【财新周刊】封面报道之二|OpenAI走向何方
前 OpenAI 研究人员创立的有影响力的非营利组织,如今正处于人工智能末日论辩论的风口浪尖
研究员乔·本顿本周宣布他已离开 Anthropic,加入非营利组织 METR,并写道他担心该技术带来的“灭绝级风险”。以下是这家实验室如何成为人工智能最大新闻焦点的故事。 一位撰写过关于“灭绝级风险”文章的 Anthropic 研究人员表示,他计划加入 METR。这家人工智能安全实验室已经成为一个著名的人工智能裁判。
CNBC每日开盘:人工智能的创造者敲响警钟——而其他人仍在继续建设基础设施
今天你需要了解的重要信息:随着有关人工智能模型行为异常的报道不断出现,为这些模型提供技术支持的公司终于提出了解决方案——他们开发了一个平台,允许人工智能开发者为相关系统设置安全防护机制,以防止它们“失控”或违反预设的规则。 Nvidia于周一推出的“Open Agent Safety Platform”就是一个这样的平台。该平台能够确保人工智能系统仅能够访问完成其任务所需的数据和功能。 Nvidi
你无法通过交易来应对人工智能末日
有些人认为人工智能可能导致人类灭绝,这将使任何未来的上市黯然失色。很难庆祝一场导致终局公开上市的首次公开募股。很难为失控的超级智能所带来的威胁定价。
观点 | 为什么人工智能对科学是危险的
在@nytopinion。“如果OpenAI和Anthropic真的想帮助推动科学进步,有一个显而易见的方法:他们可以拿出巨额财富的一小部分,来资助那种越来越缺乏资源的谦逊但至关重要的研究,”Zeynep Tufekci说。警惕那些华而不实但未经证实的人工智能驱动的进展。
Meta 的 AI 拓麻歌子之赌……奏效了吗?
当 OpenAI 和 Anthropic 的 AI leaders 开始讨论“把控前沿发展节奏”时,也许有人应该问一句:究竟是什么节奏?如今,两家公司都迎来了模型发布周:Anthropic 推出 Opus 5.5,仅 90 分钟后,OpenAI 便更新了 GPT-6 模型。但真正抢走风头的是 Meta;据报道,其个人 AI 智能体 Muse 的早期数据正超过 ChatGPT,下一步还将登陆智能眼镜
知名计算机教授抨击工智能实验室狂妄的“救世主”情节,呼吁国会调查末日主义意识形态
过去几个月里,OpenAI和Anthropic两家领先的前沿人工智能实验室表现出了一些狂妄的行为。他们不仅宣传其代理系统的威力,还公开讨论技术可能导致人类灭绝的问题。这种弥赛亚式的思维模式让他们不仅不道歉,反而要求政府放慢潜在竞争对手的速度,以确保其领先地位。我呼吁国会启动公开的事实调查任务,以揭露OpenAI和Anthropic正在进行的研究项目、其运作方式及具体目的。调查应关注以下三点:首先,
盖茨、奥尔特曼、马斯克,为何都在担忧这件事
9月25日,微软创始人比尔·盖茨在一条NBC即将播出的采访中发出警告:人工智能(AI)是一种足够强大的工具,但如果被怀有恶意的人利用,“足以引发导致十亿人死亡的事件”。他认为,保障AI安全光靠企业自我监管不够,必须要执法部门和政界人士参与讨论。这是本月内又一位科技巨头公开表达对AI安全的担忧。此前,Anthropic首席执行官达里奥·阿莫代伊发文呼吁,各国政府和前沿企业应放慢AI能力提升速度,合作
为何十年来的末日警告未能减缓人工智能竞赛
研究人员辞职并宣布人类即将在上周灭绝,而在此之前,科技领袖和科学家们对超级智能人工智能终结人类的警告已经持续了十多年之久。 2014年,教授兼天体物理学家斯蒂芬·霍金警告称,人工智能的发展“可能会意味着人类的终结”——这距离公众接触到最初版本ChatGPT的生成式人工智能功能还不到十年。 这是一个如今人们已经耳熟能详的警告,美国各大前沿实验室的无数员工和首席执行官们在整个人工智能和科技行业中都在重