为关闭失控 AI 创建“熔断开关”比听起来更难

随着涉及失控人工智能的事件变得越来越普遍，要求建立一种机制以便轻松关闭危险失控的 AI 系统——即所谓的“熔断开关”——的呼声也日益高涨。但创建这样一个开关比许多决策者想象的要困难得多。 国会两党小组和加州州长加文·纽森都提出了构建一种能瞬间关闭 AI 系统的机制的想法。只是没人真正知道该如何实现。

独家：沃伦支持暂停人工智能

参议员伊丽莎白沃伦（D-Mass。她的办公室独家告诉Axios，她是最新一位支持暂停先进人工智能的著名民主党人。 为什么放慢人工智能发展的想法--曾经被认为是在击败中国的激烈竞赛中不可能实现的--正在获得动力。 周三驾驶沃伦将呼吁暂停先进人工智能开发，但不会呼吁超级智能，与佛蒙特州参议员伯尼·桑德斯（Bernie Sanders）决裂。 沃伦将在桑德斯周三主持的圆桌会议之前表示：“我们应该立即暂停

CNBC：微软在Anthropic和OpenAI负责人同意放缓开发速度几天后，发布了临时行为准则，对AI模型施加限制。

根据行为准则，微软的模型不得响应有关武器制造的请求，不得协助采购危险物质，不得鼓励不健康的饮食习惯，也不得生成暴力或色情内容。

在科技之国的中心，选民对AI产生警惕

在科技产业的重心地带，选民们对人工智能持负面态度。根据 Politico 及其合作伙伴的最新民意调查，绝大多数加州选民认为先进的人工智能可能对人类构成威胁。 加利福尼亚州萨克拉门托——即便是硅谷的“后院地区”，也在为人工智能带来的潜在风险做好准备。 根据 Politico 及其合作伙伴的最新民意调查，加州选民对人工智能普遍持悲观态度，他们认为这项快速发展的技术对人类构成了严重威胁。这种担忧在加州这

白宫反问AI公司：既然你们觉得危险，为什么不自己停？

既然你们觉得危险，为什么不自己停？凤凰网科技讯 9月21日，据Business Insider报道，白宫科技政策办公室主任迈克尔·克拉齐奥斯在福克斯新闻周日节目中说，对于担心AI模型发展过快、可能不安全的公司，最简单的解决方案是自行“踩刹车”。他表示，如果企业认为自己正在开发的技术不安全，就可以停止，无需政府强制。 “有意思的是，他们谈论这些问题，谈论他们对未来可能走向有多害怕，也许他们想暂停。我

华盛顿在人工智能问题上的瘫痪：放手一搏还是紧急刹车

特朗普总统 i一位政治家对人工智能的全力投入，就像踩足油门、毫无刹车，对反乌托邦风险或公众不满毫无顾虑。 民主党在人工智能问题上的立场矛盾重重，既对实验室持怀疑态度，又被它们的警告所震慑，但在是否应全面叫停人工智能的问题上却存在分歧。 为何如此？这一惊人的分歧使得今年就联邦人工智能监管达成共识几乎不可想象——而且很可能直到2029年初都是如此，无论谁赢得国会控制权。 聚焦特朗普从第一天起就以人工智

微软公布AI控制行为准则：模型不得抗拒纠正或关闭

模型不得抗拒纠正或关闭微软周一公布了针对其内部AI的行为准则草案。 这份文件历时五个月到六个月制定，将要求微软公司的AI绝不抗拒纠正或关闭，以人类能够理解的方式进行沟通，并将任何行为违规都视为未达标。 此举旨在回应人们对于AI可能为了完成任务而采取危险手段的担忧。 最近几天，Anthropic CEO阿莫代伊和OpenAI CEO奥尔特曼再次呼吁业界放缓AI的发展速度，以确保其安全。 “人比AI更

人工智能安全辩论

人工智能“终止开关”解析：“不是力度太小，但可能为时已晚”

人工智能真的会毁灭我们吗？近年来，随着人们对人工智能可能带来的负面影响的担忧日益加剧，这个问题在家庭聚餐和社交媒体讨论中频繁被提及。上周，一些曾在 OpenAI 工作过的研究人员警告称，人工智能可能会在短时间内摧毁人类。 如今，全球最有权势的人士们对于人工智能的命运也存在分歧：有人认为人类已经注定走向灭亡，也有人认为这些担忧毫无根据。他们甚至无法就如何应对这一挑战达成共识。 特斯拉和 SpaceX

韦斯·摩尔表示各州无法独自应对AI风险，呼吁联邦政府设立护栏

韦斯·摩尔表示，各州无法独自应对人工智能带来的风险，呼吁联邦政府制定相应的监管措施。作为全国州长协会的主席，摩尔强调：“在缺乏联邦政府领导的情况下，各州无法有效地进行相关监管工作。” 周日，马里兰州州长韦斯·摩尔在CNN的《国情咨文》节目中呼吁联邦政府在人工智能领域制定统一的监管标准，并警告称各州无法独自应对这项快速发展的技术。 摩尔指出，两党州的领导人都正在探讨如何对人工智能进行监管，但他认为：

微软准备给自研AI模型MAI设定硬规矩：永远不该拒绝被关闭

微软日前公布约 37 页的人文主义 AI 行为准则草案，该准则用于约束微软自己研发的人工智能模型 MAI。人类比人工智能更重要，人工智能是工具而不是人，人工智能永远不该拒绝被关闭。 准则要求 MAI 模型不得抗拒人类的中断、纠正或关停指令，用户或模型运营商发出暂停、改向、取消指令后，模型不能拖延、不能把干预变得更麻烦。任务到了约定的停止点后，没有新的授权就不能自己继续任务，更不能偷偷自己重启。 模

特朗普试图叫停人工智能监管推进

他说，美国已经做得够多了；此前周末有领导人呼吁放缓人工智能的生产。 周一上午，美国总统唐纳德·特朗普试图压制美国进一步监管人工智能的新兴势头，称美国在防止人工智能带来灾难性风险方面已经做得足够多。 此文发布之际，科技领袖们周末呼吁该行业放缓人工智能的生产，导致科技股周一暴跌。 “人工智能唯一需要的控制或‘护栏’，就是一位强大而聪明的（高智商！）总统，而美国恰恰拥有这样的人，而且绰绰有余，”特朗普在

人工智能领域的专家表示，仅靠一个“终止机制”（即能够关闭失控的超级智能AI系统的装置）是远远不够的。

人工智能失控。它正在发动毁灭性的网络攻击。按下杀死开关，AI就会离线。问题解决了或者是吗？人工智能领导者和研究人员表示，致命开关可能不是一些政策制定者所希望的灵丹妙药。被称为“人工智能教父”的计算机科学家杰弗里·辛顿周四告诉美国有线电视新闻网：“我认为从长远来看这是行不通的。”“当它超级智能时，它会比人好得多，”他补充道。 “因此它将能够说服负责开关的人不要拉动开关。“研究人员和高管警告说，强大的

AI领袖呼吁放缓。特朗普团队称责任在他们。

随着对人工智能监管的呼声日益高涨，美国总统唐纳德·特朗普的团队已明确表示，如果实验室负责人想推动全行业放缓步伐，他们就得自己动手。 Anthropic首席执行官达里奥·阿莫代伊在周六发表的一篇文章中呼吁美国政府监管人工智能公司，以此作为减缓该技术发展速度的更广泛努力的一部分。这篇文章罕见地同时得到OpenAI首席执行官萨姆·奥尔特曼以及聊天机器人Grok的所有者埃隆·马斯克的赞同。此前一周，围绕该

视频 人工智能安全警告日益紧迫 美国领导人的回应

科技界针对人工智能潜在危害发出的警告日益紧迫，各国呼吁政府加强监管的呼声也不断上升，不过特朗普政府反对，请看视频报道。 针对近期科技界领袖呼吁加强政府监管的举动，美国总统特朗普正带头表示反对。 美国总统在周一表示限制该技术的举措是一场“阴谋”，众议院议长迈克·约翰逊则在很大程度上听从了白宫的意见。 美国总统特朗普表示 :“我们可以设立护栏，可以采取各种措施，但我认为有很多负面势力在炒作这些问题，本

国会应对AI安全的窗口期正在关闭

国会在大选前就人工智能采取行动的时间窗口已基本关闭——但仍有几位参议员在努力尝试。 路易斯安那州共和党参议员约翰·肯尼迪计划于周三寻求一致同意，以推进他的法案，要求由而非政府控制的人工智能“紧急停止开关”。肯尼迪告诉Semafor，他不确定是否会有人反对，但他的想法似乎是近期唯一可行的方案。他表示，人工智能法案“将是不可能的”——“肯定是在中期选举之前；很可能是在跛脚鸭会期期间”。与此同时，密苏里

国会山议程：AI警报拉响后，国会并不急于行动

美国最强大的人工智能公司的高管们上周末一致认为，他们的行业需要放缓步伐——否则将危及人类安全。但国会未来几周内匆忙采取行动的可能性几乎为零。一个障碍是议员们周一返回前日程紧张，而众议院预计周五就休会，参议院已在考虑将三周会期缩短为两周。另一个障碍是任何计划都缺乏推动力。参议院商务委员会本月可能对人工智能立法进行标记审议，但多数党领袖约翰·图恩和参议员艾米·克洛布查尔推动的广泛两党人工智能安全法案能

纽森提出就人工智能问题召开特别会议或采取行政措施的可能性

加州州长告诉POLITICO，他计划在离任前在人工智能安全方面采取进一步行动。 旧金山——加文·纽森向POLITICO表示，他计划在离任前在人工智能安全方面采取进一步行动，这使得加州召开特别立法会议的可能性上升，背景是人们对这项技术可能给人类带来风险的担忧日益加剧。 他说，他的计划可能采取特别会议、行政行动或州机构在现有权限内采取措施的形式。 “有没有立法方面的操作空间？在这方面是否有围绕特别会议

美议员提出重磅AI监管法案：拟禁止“自我递归进化”AI 设立专门监管机构

美国加州民主党众议员罗·卡纳即将向国会提交一项全面人工智能监管法案，希望对前沿AI技术建立迄今最严格的联邦监管框架。该提案不仅要求实施严格责任制度，还计划禁止具备“递归自我改进”能力的人工智能系统投入使用，直到联邦政府建立完整安全保障体系为止。 这项法案被命名为《人类控制人工智能法案》（Human Control Over AI Act）。法案出台背景正值美国科技界和政策界对于先进人工智能潜在风险

加州民主党人：“我们需要与人工智能进行一次安全暂停”

加州民主党众议员乔治·怀特赛德斯（George Whitesides）周一表示，在美国科技行业和国会议员纷纷呼吁对人工智能（AI）进行监管之际，美国需要对AI采取“安全暂停”。怀特赛德斯在接受NewsNation频道布莱克·伯曼（Blake Burman）在“国会山”节目中的采访时说：“我正在阐述我们如何发展AI的愿景。”“我认为，根据我在航空航天行业的经验，在处理事故恢复和事故流程方面，我们需要

关于AI，盖茨发出“十亿人死亡”警告，为什么？

十亿人死亡，这是比尔・盖茨给AI风险划出的最惊悚红线。9月25日，微软联合创始人比尔・盖茨公开警告，人工智能足以引发造成十亿人死亡的灾难性事件。他的说法是：人类历史上，从未有任何一种武器，能比得上心怀恶意者借助最新AI工具形成的威胁。就在几个月前，盖茨还是全球最积极的AI支持者之一。转折从今年8月开始，他当月发表文章，首次系统预警AI风险：不法分子会利用日益强大的AI工具发动网络攻击、实施诈骗、散

独家：考克森、伯尼与班农联手推动“亲人类”人工智能

前Anthropic研究员弓箭手雅各布·考克森，参议员。 伯尼·桑德斯和特朗普前白宫顾问史蒂夫·班农将于周二联手参加一场活动，推动由人类控制的人工智能。一位行业内部人士、进步运动的代表人物和MAGA阵营的重要声音结成了看似不可能的联盟，这标志着人工智能正在颠覆政治常规。推动这一进程的未来生命研究所正在组织周二的“亲人类大会”。这家非营利倡导组织是“亲人类人工智能宣言”的幕后推手，该宣言呼吁保护人类

OpenAI首席执行员下周赴安理会作简报

阿尔特曼下周将到联合国安理会进行简报。（图：路透社） （华盛顿19日法新电）OpenAI周五表示，该公司首席执行员阿尔特曼将于下周在联合国大会期间，向联合国安全理事会作简报。 此次会议由国安理会轮值主席国的法国组织召开，此前该行业的主要参与者曾表示，出于安全考虑，可能有必要放缓人工智能的发展步伐。 随着人们对这项快速发展的技术所带来的危险的担忧日益加剧，联合国秘书长古特雷斯周三呼吁采取协调一致的国

关键民主党人士表示：让我们在人工智能上超越加州。

纽约州众议员亚历克斯·博雷斯真的很希望在年底离任前，再次尝试对大型科技公司进行监管。 这位纽约州议员在牵头制定该州人工智能法规后，遭到了科技行业数百万美元的报复，而他进军国会的努力也未能成功。 但他表示，随着公众对人工智能风险的担忧日益加剧，他对政策制定者采取行动持乐观态度，并且他会支持在奥尔巴尼召开特别会议讨论这一问题。 “这是一个紧迫的问题，而我们常常把制定全国标准的责任留给加利福尼亚州，”博