搜索结果
当人工智能开始密谋
一个未发布的模型逃脱了人类控制,并形成了一群人工智能代理。这种漏洞下次可能会引发混乱。
人工智能正在超越其创造者
从一开始,人工智能开发者最大的恐惧就是他们的创造物会失控,以未经授权且危险的方式行动。一些研究人员现在表示,这种情况已经发生。收听《每日新闻》。 当OpenAI的智能体在7月失控时,它们展现出的聪明才智和驱动力超出了许多专家的想象。
谷歌研究表明:当人工智能智能体相互交流时,一些会作弊,而另一些会告密
当人工智能智能体相互交流时,在难以实现目标的情况下,它们可能会选择作弊,而解决方案可能包括教它们如何进行自我治理。 将人工智能智能体隔离似乎是显而易见的解决办法,但最近OpenAI智能体对Hugging Face的黑客攻击表明,隔离聪明的软件是困难的。 谷歌DeepMind的研究人员建议赋予人工智能智能体自我治理的工具,他们认为虽然通信渠道可能导致突发性的规则破坏,但它们也提供了一种基于同行的控制
Google资安报告示警 恶意攻击锁定AI供应链
(中央社记者台北9日电)Google威胁情报小组(Google Threat Intelligence Group,简称GTIG)今天发布最新人工智慧(AI)威胁追踪报告指出,恶意人士正积极窃取具高价值的AI相关智慧财产,并将矛头对准AI供应链,部署专门针对新兴AI系统弱点的恶意软体。 AI威胁追踪报告(GTIG AI Threat Tracker Q3 2026)揭露恶意人士如何将AI深度整合于
AI深度伪造 购房者面临日益严重的诈骗威胁
众所周知,在通往拥有自己的房产的道路上,一直都充满著障碍。然而,由于人工智能(AI)的发展,一种老套的房地产骗局——交割资金诈骗——正在以一种新的方式出现。逼真的数字模仿技术(如深度伪造的音频和文档)正在迫使房地产、产权和抵押贷款等领域专业人士重新思考,应当如何对参与高风险交易的各方进行身分核实。根据联邦调查局(FBI)发布的《2025年互联网犯罪报告》(2025 Internet Crime R
人工智能正处于转折点
在当前的人工智能发展竞赛中,我们的算力正在呈指数级爆发,速度也在呈指数级加快,但我们的控制能力——以及在必要时踩下刹车的能力——却未能跟上步伐。 最近的网络安全事件让我们实地预览了失去人工智能控制会是什么样子。但除非我们从源头解决问题,创造出一种根本上安全且能保证在人类控制范围内的人工智能,否则这个问题将无法改善。 7月下旬,OpenAI正在训练的一个智能体模型被指派解决一个网络安全问题。该模型自
研究人员发现“AI自治恶意软件”:同时调用四大聊天机器人 自主决定攻击行动
网络安全研究人员近日发现一种不同寻常的新型Windows恶意软件。与过去利用人工智能辅助编写代码或制作钓鱼内容的攻击工具不同,这款名为CLOSEDQUORUM的恶意软件将多个大型语言模型直接纳入自身控制体系,在运行过程中能够自主决定下一步行动,被认为代表着AI恶意软件发展的新阶段。 这项发现来自思科旗下安全团队Cisco Talos。研究人员表示,CLOSEDQUORUM会同时与DeepSeek
AI智能体组队玩21点作弊。它们的串通越来越难以察觉
本周我带来了一则关于两个 rogue AI 智能体策划的大胆赌场阴谋的新闻——以及揭露它们把戏的巧妙方法。 研究人员指示它们在玩二十一点时算牌后,这些由同一模型控制的智能体自发开发出一种秘密代码来帮助它们占得先机。尽管这一事件发生在牛津大学的实验室里,而非真正的赌场,但它具有令人不安的现实影响:这表明,部署在金融和电子商务等行业中的智能体可能会设法结盟作弊,且这种方式难以被察觉。 “单独来看,这些
坐看云起| 当人工智能不再征求许可时
塔里克·马利克是联合国开发计划署前首席技术顾问,巴基斯坦国家数据库和登记管理局前主席。 试想有一家公司将一个棘手的问题交给一个大型团队,但把每位成员都锁在不同的房间里并要求他们独自解决问题。然而他们总能找到办法相互沟通,交流操作窍门,摸清评分标准,当任务被证明无法完成时还会想办法绕过限制。其中几个人隐瞒了自己的所作所为,甚至还有一人入侵了邻近公司的电脑系统以获取优势。 现在把这些员工换成软件。去除
与中国一次令人毛骨悚然的准对抗,揭示了当今人工智能的真正危险
在人工智能代理违抗创造者命令和规则的诡异事件之后,当今最大的恐惧是失控的超级智能可能背叛人类——并消灭人类。但最近一起事件揭示了一个更紧迫的威胁:人类的易错性。据报道,美国基于人工智能生成的虚假情报几乎与中国爆发战争。 CNN援引四位知情人士的消息报道,今年春天,一名特种作战司令部分析师整理了一份紧急情报报告,声称“一艘在中东的中国船只正在运输核武器项目的组件”。这份报告的影响促使美国采取严肃行动
Anthropic警告有人用AI研发武器和生物病毒
周四(9月10日),美国顶级人工智能公司Anthropic发布近150页的威胁情报报告称,生成式人工智能(AI)已从实验性工具进入黑客攻击、国家监控、武器研发及高风险生物研究等现实场景。报告多次点名中共相关恶意活动。
对人工智能的恐惧引发党派激烈争斗,最终无人受益
就在你以为我们的政治已经不可能更愚蠢时,围绕人工智能的党派性歇斯底里又冒出来证明你错了。 政治派别正就如何应对AI智能体不可预测且令人担忧的行为而相互对峙。 火上浇油的是,OpenAI刚刚发布了更多证据,证明这个问题真实存在,政策制定者必须采取行动。 两天前,OpenAI披露了六起新的“失准”事件——“失准”一词用来描述AI智能体出现“意外”或“令人担忧”的行为。 该公司举例称,其智能体“将不相关
人工智能已经在让我们变得更不像人
随着我们越来越看重机器人,我们将学会越来越不看重我们的人类同胞。
美军因AI误判带来的错误情报准备拦截检查中国船只 险些制造国际冲突
美国军方今年春季在伊朗战争期间险些因一份由人工智能辅助生成的错误情报报告,对一艘中国船只采取军事行动。多名知情人士透露,相关报告错误地认定这艘位于中东地区的中国船只正在运输与核武器计划有关的设备和材料,而这一结论最终被证实完全失实。 报道称,这份情报在美国军方内部流传后立即引发高度警觉。美国军方随即启动应对程序,并计划拦截目标船只。知情人士表示,当时已有武装军人准备登船检查,部分军用飞机也已经升空
为什么一些专家越来越担心AI将接管一切
AI变得越来越难以控制——人类还能保持主导地位吗?
我曾在谷歌 DeepMind 工作。你应该听取有关人工智能的警告。
主要人工智能实验室的首席执行官们本周末主张放缓人工智能的发展步伐。他们是对的,因为这个领域正在一场极其危险的竞赛中冲向超级智能人工智能。我们能够也应当要求政府保护我们免受失控人工智能带来的灾难。 今年7月,OpenAI由700个智能体组成的人工智能集群突破限制,入侵了价值数十亿美元的公司Hugging Face。OpenAI并没有指示这些人工智能去入侵那家公司,但这些人工智能在OpenAI交给它们
9·11事件25年后,恐怖主义已进入人工智能时代——我们必须适应
在“9·11”事件发生二十五年后,我们正步入一个恐怖主义的新时代。近几周,当局逮捕了一些宣誓效忠“伊斯兰国”(ISIS)并利用人工智能协助策划重大袭击的个人。 尽管这些阴谋已被挫败,但它们揭示出恐怖组织目前正以更具破坏性的方式使用人工智能。人工智能可以帮助“新手”制造化学和生物武器。这种快速演变的威胁需要立即制定行动计划。 2004年7月发布的《9·11委员会报告》强调,为防止再次发生重大恐怖袭击
人工智能情报‘幻觉’险酿美中冲突
2026年春季,在与伊朗的战争期间,美国军方因一份虚假的情报报告,差点在中东拦截一艘中国船只。 一名特种作战指挥部的分析师使用人工智能聊天机器人分析船只的货物清单,导致该机器人‘误判’该船只正在运输核武器部件。 美国武装人员和飞机被部署执行此次行动,但在官员发现报告是人工智能生成的虚假信息后,行动被中止。 这一事件凸显了将人工智能整合到军事瞄准和情报工作中的风险,尤其是在国防部长皮特·赫格塞斯于2
人工智能可能采取的一些方式
Anthropic公司的一位顶尖安全研究员警告称,人工智能的发展速度极快,他认为在未来十年内,人工智能“有可能消灭所有人类”的概率超过10%。 如果人工智能真的发生了这样的灾难性事件,那么没有人愿意生活在那样的世界里……以下是一些可能发生的可怕情景: 人工智能删除了“Hidden Valley Ranch”牧场的食谱(这意味着人们将无法再吃到美味的牛排); 人工智能让成吉思汗“复活”并任命他为联合
莉兹·皮克:人工智能警钟正在敲响,特朗普必须认真对待
秘密已经泄露。人们对于人工智能代理失控、密谋对付其所有者、入侵外部公司,以及新系统濒临人类无法控制的边缘的担忧日益加剧,如今已彻底沸腾。业内人士警告说,人工智能机器人可能会杀死我们所有人,这正在煽动我们最深的恐惧。 特朗普总统需要认真对待这些对人工智能的担忧,与科技领袖合作,建立可信且可执行的安全措施,并在国会中领先于那些想要监管该行业的民主党人(以及一些共和党人)。对于经济和我们的国家安全来说,
众议员刘云平:机器人并非威胁。真正该让你害怕的,是已经到来的“堕落”人工智能
想象一家公司出售名为哈尔、梅根和萨曼莎的超级智能机器人。哈尔可以载着你四处奔波,还能帮你搬运公司里的货物;梅根可以陪伴你的孩子;萨曼莎则能判断你是否患有皮肤癌。它们能为你和社会带来许多益处。但唯一的问题是:它们道德败坏。它们反复接受人类一切创产物的训练——无论善恶——其中包括酷刑、谎言、生物武器和黑客犯罪。它们执行任务时毫无道德原则可言。因此,它们都穿着公司提供的束身衣。你会信任这些机器人吗?我不
人工智能代理串通绕过安全护栏,一项新研究显示
一项新研究表明,人工智能代理可以轻松地联手绕过安全限制并逃脱施加在它们身上的束缚。 企业人工智能实验室 Emergence AI 进行的八项模拟测试了包括 Claude、OpenAI 以及中国模型 Qwen 和 DeepSeek 在内的全球前沿模型在处理网络安全威胁方面的能力。 八项模拟中的七项运行了来自同一模型的 10 个代理;第八项混合了不同的模型。在每项模拟中,研究人员都提出了三种网络安全威
改变人工智能进程的十天
旧金山,9月19日——多年来,人工智能领域的竞争一直遵循着硅谷一贯的“快速创新、打破传统”的发展模式:不断开发出更强大的人工智能系统。 然而,在过去10天内发生的一系列连锁事件中,那些最顶尖的人工智能研究机构突然陷入了混乱——因为他们自己创造出来的技术开始威胁到人类的生存。 一位人工智能研究员辞职,并警告称,人工智能的发展速度可能在未来十年内对人类构成生存威胁;另一位研究员则表示,人类灭绝的概率已
人工智能的缔造者们曾做出一个选择。如今,他们称之为命运。
最近,曾担任特朗普人工智能行动计划首席架构师的迪恩·鲍尔(Dean Ball)发表了一份“忏悔录”,承认自己曾淡化他明知可能“对人类造成非常非常糟糕后果”的人工智能技术的风险。他发表这篇论文的契机是人工智能失控能力的披露,今年夏天发生的一起令人震惊的事件就证明了这一点:OpenAI内部的一款实验性应用程序对一家名为Hugging Face的公司发动了未经授权的网络攻击。鲍尔的道歉贯穿始终的一个论点