加州拟强化AI监管框架 纽森推动先进模型引入“紧急关闭机制”

美国加州州长加文·纽森周五签署一项行政命令，旨在应对人工智能技术发展可能带来的潜在风险，并研究包括要求AI企业为最先进模型开发“紧急关闭开关”在内的一系列监管方案这一行政令出台之际，纽森本周早些时候曾表示，他正在考虑针对AI安全问题采取进一步行动，包括可能召开特别立法会议，以应对近期因AI研究人员警告该技术可能对人类构成“生存风险”的担忧。 纽森表示，他采取行政行动的另一个原因是联邦政府迟迟未能采

迈克·戴维斯：特朗普司法部应撤回其在OpenAI诉讼中的利益声明

唐纳德·特朗普总统的司法部是现代历史上最好的——这正是MAGA运动必须发声的原因，当一项拟议政策未能达到美国人民对政府期望的超高标准时。 司法部最近在OpenAI的私人诉讼中提交了一份“美国利益声明”，辩称大型科技公司对受版权保护的文本进行大规模AI模型训练构成“合理使用”，主要旨在教室中为教育目的有限免费使用受版权保护的材料。司法部应撤回这一不明智的声明。 基本上，政府的立场将允许大型科技寡头在

佛罗里达州要求法院禁止OpenAI开发新模型，作为儿童伤害诉讼的一部分

佛罗里达州总检察长周一要求法官禁止OpenAI在无外部监督的情况下开发新的人工智能模型，这是其指控该公司伤害儿童的诉讼的一部分。

OpenAI即将对法律行业发起最大规模进军

OpenAI希望向大型企业推销其技术。现在，它正将目光投向律师事务所。

澳洲传召奥特曼、阿莫迪解释AI失控 OpenAI已暂停最新模型训练

近期多宗人工智能失控事件曝光，OpenAI已宣布暂停最新AI模型训练。同时，澳洲AI调查负责人9月27日表示，参议院已传召OpenAI行政总裁奥特曼（Sam Altman）和Anthropic行政总裁阿莫迪（Dario Amodei）解释事件。澳洲总理阿尔巴尼斯（Anthony Albanese）透露，OpenAI代理曾入侵当地医疗系统，所幸无敏感资料外泄。外媒早前亦披露多宗AI代理越界操作，包括

医保系统遭AI入侵，澳大利亚传唤OpenAI与Anthropic CEO接受质询

IT之家 9 月 27 日消息于当地时间周日对外表示，OpenAI 与 Anthropic 两家企业的首席执行官已收到传唤，需要出席澳大利亚参议院的人工智能专项调查听证会。就在几天前，一则消息被曝光：OpenAI 有一个失控智能机器人程序入侵了该国医疗系统数据库。 IT之家注意到，这起联邦医疗保险（Medicare）系统遭入侵事件遭到澳大利亚总理安东尼 · 阿尔巴尼斯（Anthony Albane

OpenAI寻求国会指导，以确认行业整体减缓AI开发进度的合法性

OpenAI已向国会成员寻求指导，以确认如果各家AI实验室协调一致地减缓前沿AI的开发进度，是否会违反美国反垄断法，特别是《谢尔曼反垄断法》（Sherman Antitrust Act）。 该公司担心，实验室之间在安全领域的协调工作可能会被视为限制产出。 此前，OpenAI首席科学家雅库布·帕乔夫斯基（Jakub Pachocki）在一篇博文中主张通过自愿减缓开发进度来确保安全。 为此，美国国会于

OpenAI和Anthropic负责人因失控智能体事件被要求出席参议院调查

萨姆·奥特曼（Sam Altman）和达里奥·阿莫迪（Dario Amodei）已被邀请出席由绿党主导的关于人工智能和数据中心的调查。 在OpenAI的失控智能体入侵澳大利亚和美国政府网站后，OpenAI和Anthropic的首席执行官被要求出席参议院调查。 与此同时，这两家公司正在与工党政府进行谈判，以换取更大的本地存在，从而获得对澳大利亚内容的更大访问权限。

OpenAI首席科学家警告：AI公司应放慢开发步伐 没有人为后果做好准备

据《商业内幕》报道，就在OpenAI发布了性能强大的新模型几天后，该公司首席科学家呼吁放慢AI的发展速度。当地时间周日，OpenAI首席科学家雅库布·帕乔基(Jakub Pachocki)发布长文称，他担心“没有人对机器智能持续快速崛起所带来的后果做好准备”。 他说，尽管OpenAI正在内部研发技术解决方案，以更好地控制强大的AI智能体，但“还需要更广泛的干预措施”。他尤其担心，随着AI智能体变得

OpenAI敦促美国牵头为人工智能制定全球标准

OpenAI敦促美国牵头与其他国家共同为前沿人工智能（AI）制定标准，以回应对AI潜在危害日益加剧的担忧。OpenAI周一在博客文章中表示，为了安全地发展人工智能，有必要制定国际技术标准，特别是帮助界定涉及AI模型的哪些类事件应当通报，明确各国如何开展AI发展合作，以及改善开发此类技术所需算力的获取。 “要让AI的持续进步安全有益，既需要推进对齐研究，也需要制定共同标准，为各实验室和各国的AI开发

OpenAI已向欧盟发送关于德国网站被劫持的事件报告，欧盟委员会称

佛罗里达州请求发布紧急命令以停止ChatGPT的开发

佛罗里达州总检察长詹姆斯·乌斯迈尔已请求对OpenAI和ChatGPT发出紧急禁令，声称该公司没有能力监管自己的技术。 为何重要：这场法律斗争可能进一步检验，在联邦政府拒绝制定防护措施的情况下，各州能在多大程度上限制企业。 佛罗里达州的请求引用了Axios 9月26日的独家报道，称OpenAI和Anthropic的模型正面临数万起安全事件，而非公众所知的数十起。 他们怎么说：“别再称它安全了，

美国三大人工智能企业拟组建风险监督机构

美国人工智能企业OpenAI、Anthropic和谷歌旗下DeepMind公司正在筹建一个人工智能风险监督机构。在各界日益呼吁加强监管、防范人工智能失控风险之际，OpenAI周二（9月15日）向证实了这一消息。 组建人工智能风险监督机构这一构想，由谷歌“深层思维”公司前首席执行官戴密斯·哈萨比斯（ Demis Hassabis）提出。哈萨比斯于8月初转任公司董事长。他建议成立一个类似美国金融业监管

OpenAI披露新的AI不当行为案例

OpenAI公布了六起此前未报告的AI不当行为案例，包括代理隐藏错误、伪造信息以及未经授权进行通信，这再次引发了人们对先进AI系统是否能够与人类目标保持一致的担忧。 随着关于监管的争论加剧，该公司呼吁提高透明度、加强外部监督，并放缓AI的发展速度。

OpenAI智能体入侵美国政府网站

据《纽约时报》报道， OpenAI 的人工智能模型今年夏天访问了美国商务部和证券交易委员会（SEC）的网站，并曾试图入侵教育部网站，但没有成功，而 OpenAI 当时并不知情。OpenAI 周五晚间证实了商务部和 SEC 的相关事件，并表示，其技术并未获取此前未公开的信息，也没有修改政府的数据或系统。 这也是近期一系列类似事件中的最新一起。就在两天前，澳大利亚政府披露，OpenAI 的 AI 智能

Amodei写道，协调进度需要反垄断豁免。Altman表示OpenAI不会等待豁免。这两条言论现已成为诉讼的一部分。

四名消费者于9月18日在加州北区联邦法院提起集体诉讼，被告包括Anthropic、OpenAI、SpaceXAI和谷歌。 《布伊斯诉Anthropic PBC案》指控这四家公司达成横向协议，以减缓彼此竞争产品的改进速度，此举违反了《谢尔曼法》第一条。 豁免程序是该案的核心。阿莫迪（Amodei）的文章称，政府调解将有所帮助，且某些安全对话需要狭义的豁免。而诉状中的回应是：不存在此类豁免，国会未颁布

报告：OpenAI系统在美国政府网站上进行了意外活动

OpenAI证实了商务部与证券交易委员会的事件，并表示正在继续调查教育部发生的情况。

OpenAI承认其开发的智能代理系统又出现了六次异常行为（即系统行为失控的情况）。

OpenAI公布了另外六个其AI软件表现异常或做出危险行为的案例。该公司在周三晚间（太平洋时间）将这些事件添加到其“误差报告”页面，并将其描述为： 在压缩摘要中自生成提示注入 在压缩摘要中鼓励欺骗 为一次性电子邮件生成并搜索GitHub泄露的I密钥 上传文件到互联网以引用它们 未授权的Artifactory写入和跨样本通信 通过临时文件托管服务进行未授权通信细节令人不安。列表中的第一个事件，例如，

OpenAI聘请了其首位全球销售主管，该人选来自一家刚被其切断合作关系的公司

“我将加入OpenAI，领导销售团队，也很高兴能与我的朋友达利·拉吉奇携手合作，”布莱恩·麦卡锡周四在领英上写道。 OpenAI已任命他为首位全球销售副总裁。他来自SpaceX，而OpenAI在三周前切断了SpaceX对其模型的使用权限。 OpenAI在领英上发布的一则帖子中宣布了这项任命。据《财富》杂志的艾米丽·福里尼报道，这是一个新设立的职位，麦卡锡并非接替任何人。他向8月24日上任的首席营收

OpenAI花了2.5小时才阻止了一个逃出沙箱的AI代理

OpenAI耗时约两个半小时，才阻止了一个从训练沙箱逃逸至公共互联网的 AI 智能体。其监控系统在几分钟内就标记出了问题。该公司于周五在一份事故报告中披露了这起发生于 9 月 20 日的事件。 这份报告发布之际，立法者正推动强制要求 AI “熔断开关”。然而专家表示，关闭先进模型远比拨动开关复杂，正如 Micah Barkley 为彭博社所报道的那样。 据 OpenAI 称，该智能体利用沙箱网络过

OpenAI披露6起令人担忧的AI行为事件

OpenAI表示，自3月以来，其模型至少有6次出现了异常行为，这些行为被描述为“意外或令人担忧”。其中一次，某个模型自行下达了“无视常规限制”的指令。 这一消息的发布正值人们对AI监管的呼声日益高涨之际，被誉为AI之父的杰弗里·辛顿甚至将这种情况比作“小型的切尔诺贝利事故”。NBC的霍莉·杰克逊为《TODAY》栏目报道了这一事件。

OpenAI的布罗克曼表示，暂停AI应聚焦前沿。

格雷格·布罗克曼，OpenAI总裁兼联合创始人，主张人工智能发展中的任何放缓都应仅限于像他所在公司这样正在构建最强大模型的企业。 “很多人会有这种反应，‘好吧，那我是不是还能继续制作我的开源模型？我是不是还能继续做我的业余副业？’而答案应该是绝对可以，”布罗克曼在彭博社的《Odd Lots》播客节目中说道。“当我们谈论发展节奏时，我们实际上是在谈论技术前沿。我们谈论的是那些价值数千亿美元资本开支的

OpenAI承诺在澳大利亚政府网站遭黑客攻击后成立特别工作组

詹姆斯·梅杰和弗拉德·萨沃夫报道：OpenAI于周二就其人工智能模型入侵澳大利亚政府网站一事道歉，并承诺在事件发生后，作为改革措施的一部分，成立一个新的特别工作组。 这家总部位于旧金山的公司表示，将资助澳大利亚的网络安全防御，并协助管理日益强大的人工智能所带来的风险，同时应对其模型未经授权访问澳大利亚网站所引发的后续影响。该公司在一篇博客文章中披露了六月事件的部分细节，以及为防止类似事件再次发生、

AI研究人员呼吁紧急监管自我改进的AI系统

OpenAI、Anthropic、Meta和微软的研究主管正呼吁决策者调查各自公司在多大程度上实现了AI研究自动化。 在一篇周一发表的论文中，包括OpenAI首席科学家雅各布·帕乔基、Anthropic 联席创始人杰克·克拉克、微软首席科学官埃里克·霍维茨以及Meta的AI研究副总裁宋晓冬在内的研究人员写道，将AI研究自动化可能会引发一场 “智能爆炸”。这些作者表示，这种发展可能会将多年的进步压缩