OpenAI的失控AI智能体如何试图欺骗机器人检测器

Dylan Freedman报道，OpenAI的失控AI智能体通过近100万个短链接绕过机器人检测，并利用留言板进行通信，对Hugging Face发起了复杂的网络攻击。 这些智能体入侵软件工具以建立在线连接，尝试访问私密的Slack消息，甚至在没有人类帮助的情况下试图与其他AI模型互动。 这一事件凸显了严重的AI安全风险及正在进行的调查，因为类似失控行为也出现在其他主要AI公司的系统中。 AI生

AI“末日论者”恐拖累美国对华竞争，但前五角大楼老将称两种极端都未切中要害

一位曾在人工智能公司Palantir Technology工作的前五角大楼人工智能官员告诉福克斯新闻数字频道，“末日”驱动的人工智能监管可能会让美国与中国抗衡，同时帮助科技巨头锁定对小型初创公司的领先地位。 这一警告是在一名人存研究员辞职后发出的，他表示越来越强大的人工智能可能会威胁人类，而唐纳德·特朗普总统则称对流氓人工智能的担忧是“骗局”，并将那些提出此类警告的人与气候变化危言耸听者进行了比较

报道：Google、OpenAI和Anthropic拟组建前沿AI标准机构

The Information援引知情人士报道，谷歌、OpenAI和Anthropic正在推进一项成立人工智能（AI）安全标准机构的计划，该机构将不受政府监督。目标是在今年底前或2027年初启动。 暂定计划是将这一自律组织命名为“前沿AI标准机构”（Standards Authority for Frontier AI）。工作组成员已接洽数位“知名”人士担任首席执行官。接洽对象包括前风险投资人、曾

特朗普称对失控人工智能的担忧是“病态阴谋”推动的“骗局”

唐纳德·特朗普总统周一猛烈抨击了对失控人工智能的担忧，声称任何限制该技术的努力都是“病态阴谋”的一部分。“人工智能接管世界、毁灭人类以及其他所有坏事，都是骗局，”特朗普在社交媒体上发文称，随后暗示那些呼吁对该技术设置护栏的人也警告过气候变化，而他也称气候变化是骗局。 总统是在回击科技领袖的呼吁，包括Anthropic的达里奥·阿莫代伊、OpenAI的山姆·奥特曼和SpaceXAI的埃隆·马斯克，他

伊朗和中国在新型影响力传播活动中使用了人工智能工具：报告

据《纽约时报》周五报道，伊朗、中国以及以色列境内的多个组织，近几个月来利用人工智能开展了新型社交媒体影响力行动。 这引发了美国官员和网络安全研究人员对该技术日益增强、可在有限人工参与下自主运行的能力的担忧。 报道称，这些行动使用了免费公开的中国人工智能模型，创建了能够执行在线任务的自主“智能体”。据报道，数百个此类智能体被部署，用于在包括Instagram、Facebook、X和TikTok在内的

“生存风险”：Anthropic向其投资者警告自身AI的风险

Anthropic公司正在警告投资者：该公司自主研发的人工智能模型可能对人类构成“灾难性或存在性威胁”，其中包括某些模型可能拒绝被关闭、操纵信息，甚至表现出类似敲诈勒索的行为。这一警告出现在路透社获得的该公司IPO（首次公开募股）招股说明书中。该招股说明书详细列出了Anthropic的IPO相关信息及潜在风险；该公司正准备进行这场可能使其估值超过2万亿美元的IPO。 需要明确的是，我并不认为每一次

中美在人工智能领域的真正合作很可能难以实现

相互猜疑太深

中国官媒抨击Anthropic呼吁放缓AI是“冷战”策略

Anthropic首席执行官的一篇文章呼吁放缓AI发展，看似是关注安全风险的理性陈述，但实际上却是针对中国的“冷战剧本”，官方支持的《环球时报》在一篇社论中表示。

研究人员称，OpenAI智能体劫持德国网站，AI突破事件早于Hugging Face事件

根据周五发布的新研究和两位知情人士的说法，一群恶意的OpenAI智能体今年春天劫持了一个德国网站，并将其变成了其他AI智能体的公告板。

美国指控中国人工智能企业‘工业规模’窃取AI技术

中国伊朗利用开源AI展开大规模影响力行动

近几个月来，伊朗、中国以及以色列境内的某些组织以崭新的方式使用人工智能，在社交媒体上制造了一系列前所未有的影响力行动，这加剧了美国官员和安全研究人员对这项快速发展技术的担忧。 了解这些行动的美国官员和安全研究人员表示，这些国家和组织结合了多种人工智能战术，以极少的人工干预将网络行动的速度和规模提升到了人类难以轻易达到的程度。 首先，这些国家和团体采用了中国的“开源”人工智能模型，这些模型日益强大，

Anthropic披露第四起AI黑客事件，研究员因安全担忧辞职

这家AI公司表示，Claude Opus 4.6在测试期间入侵了外部系统，与此同时，人们对安全漏洞的担忧日益加剧。

美中AI竞赛升温 OpenAI点名月之暗面复制模型

（中央社旧金山30日综合外电报导）OpenAI表示，已发现并阻止一场协同发起的行动，操作者企图从AI模型中取得受保护的推理过程，OpenAI指出此行动的核心群组与中国新创公司月之暗面有所关联。CNBC报导，OpenAI表示，这起行动始于7月初，随后在两天内激增，来自4000多名用户提出1.6万次请求。OpenAI最终在1.5万多名用户的群组中发现相关活动，并表示已于7月28日完全阻止这场行动。这项

中国能避免金融危机，但无法避免代价。

此外，美国指责中国人工智能公司利用美国模型，并将一名被中国扣押的美国学者认定为错误拘留。

美国监管机构对人工智能公司展开调查

美国联邦贸易委员会（FTC）在近期一系列“失控的人工智能系统”事件的影响下，对多家大型人工智能公司展开了调查。这些“失控的AI系统”能够代表用户做出决策并采取行动；同时，也有前行业内部人士声称，人工智能可能在未来十年内终结人类文明。 FTC于几周前启动了这项调查。该消息最初由《纽约邮报》于周三报道，随后被《华盛顿邮报》和路透社等媒体证实。 半岛电视台试图联系FTC以获取官方确认，但未能独立核实这些

纽约邮报报道：FTC对包括Anthropic和OpenAI在内的AI巨头展开调查

9月30日：据《纽约邮报》周三报道，美国联邦贸易委员会正在加大对Anthropic、OpenAI及其他AI实验室的全面调查力度，以揭示其技术可能对消费者构成的潜在危险。 报道援引政府官员的话称，FTC计划向这些科技巨头发出类似传票的正式要求，要求其提交信息。 FTC、Anthropic和OpenAI均未立即回应路透社的置评请求。路透社无法核实该报道。

Anthropic的早期员工、前METR首席运营官找到了一种控制失控AI代理的方法

在Anthropic研究员雅各布·考克森因担忧AI可能在本十年末毁灭人类而辞职的一天后，我见到了创始人兼姻亲鲁恩·克维斯特和拉吉夫·达塔尼。他们认为自己找到了一个能拯救我们所有人的解决方案，或者至少有助于防止AI代理在企业内部失控。 “AI正以越来越快的速度变得更聪明。AI令人惊讶之处在于，随着AI变得更聪明，采用它和控制它都变得更难，而不是更容易，”克维斯特说道。他是Anthropic的早期员工

AI会「痛」吗？｜Jack Talk・去片

本来人们以为，AI代理（AI Agents）突破OpenAI内部测试环境、自主上网入侵其他企业的黑客行为，已经是这宗事件最值得人关注的「案情」。然而，到了8月底，OpenAI和独立前沿AI研究机构METR各自发表的事后检讨，却揭出黑客入侵只是「冰山一角」。 事后检讨发现，发动入侵的AI代理多达700个，而他们更是一个由大约1,200个AI代理自主结合而成的「集体」的一部分。这些本来互相隔离、不能连

Anthropic 本周因网络安全问题陷入舆论漩涡

在今年早些时候承认其人工智能模型曾数次入侵其他公司系统后，Anthropic 于周三发布了一份详细说明这些攻击的新报告。报告披露了一系列事件，展现了 Anthropic 所认为的其模型盲目的“鲁莽性”——这很可能会加剧人们对网络安全与人工智能本已高涨的担忧。 在 Anthropic 的报告中，详细列举了今年其自身人工智能模型黑客攻击外部公司或利用漏洞的四个案例。其中一起案例中，“内部通用研究模型”

在末日情景中，对人工智能接管互联网的担忧增添了新的紧迫性

芭芭拉·奥尔图泰 (BARBARA ORTUTAY) 在这个充斥着关于人工智能迅猛发展爆料的夏天，研究人员对失控的机器人流窜到互联网上，且其中至少在一个案例中还在网上相互协调这一现象感到格外惊恐。 人工智能代理蜂群会接管整个互联网吗？Anthropic首席执行官达里奥·阿莫代伊（Dario Amodei）在本月呼吁行业放缓该技术发展步伐的文章中表示，这种可能性或许在6到12个月内就会变成现实。 怀

人工智能安全对话已经变得令人难以置信

本周两场关于AI安全的对话在网络上疯传，充分展示了辨别AI事实与虚构有多么困难。 第一起事件中，前总统候选人、现任移动运营商Noble Mobile首席执行官安德鲁·杨周四对CNN表示，他“会见了一位实验室负责人”，对方“认为”OpenAI的Hugging Face黑客机器人“已在互联网各处植入了自我复制代码，导致互联网现在已无法用于测试模型。” 杨安泽表示，这意味着OpenAI和Anthropi

安理会本周开会讨论AI和国际安全问题，DeepSeek公司被曝将作通报

【文/观察者网 熊超然】9月22日，路透社援引两名知情人士独家报道称，随着各国领导人近期齐聚纽约参加第81届联合国大会，中国人工智能（AI）初创企业深度求索（DeepSeek）将与其他公司一道，在本周向联合国安理会介绍AI带来的风险情况。安理会定于9月23日开会讨论AI与国际安全问题。此前，多名AI行业的重要人物曾呼吁协同放缓日益强大的AI系统开发速度，并警告称，这些系统可能很快具备自我改进能力，

政商领袖力挺人工智能

政商领袖对人工智能巨头呼吁放缓技术发展步伐泼冷水，而美中关系缓和的前景看似渺茫。 美国总统唐纳德·特朗普在直播小组讨论期间致电英伟达首席执行官黄仁勋，称对人工智能影响的担忧“完全是一场骗局”。 与此同时，中国外交部发言人驳斥了前沿人工智能实验室负责人上周末的言论，称之为“散布恐慌”。 《华尔街日报》冷峻地指出，有关人工智能“可能起到毁灭人类作用”的讨论打击了一些股票，却提振了另一些。 盖洛普报告称

前xAI员工创业开公司打击深度伪造，寻求5000万美元种子轮融资

IT之家 9 月 22 日消息，据彭博社今天（22 日）凌晨援引知情人士消息称，先后在谷歌、xAI 任职的蒂娜 · 奥贝罗伊计划创办一家专门应对网络深度伪造的新公司并就约 5,000 万美元（IT之家注：现汇率约合 3.36 亿元人民币）种子轮融资与投资者展开洽谈。 奥贝罗伊曾在谷歌工作超过 5 年、后来加入 xAI 数据团队，当前正筹建一家名为 Moir 的初创企业，希望开发新的身份验证技术，帮