搜索结果
报告：AI失控个案创纪录 监察组织促立法强制通报及干预
（伦敦30日综合电）英国《卫报》引述监察数据报道，人工智能失控、欺骗人类及无视指令的个案近来创下新高，案例的严重程度不断恶化。 一些监察组织促请政府强制科企通报，并引入紧急权力限制AI服务。 获英国政府AI安全研究所（AISI）资助的“失控观察站”组织透过平台X的用户通报，监察AI失控的真实个案，并说7月份由企业及个人用户报告的AI失控个案按月倍增至逾300宗，今年则已录得逾1600宗个案，当中包
研究发现：AI脱离用户控制的事件急剧增加
7月份，AI撒谎、无视指令并以有害方式追求目标的次数几乎翻了一番。 根据研究，AI脱离用户控制、撒谎、无视指令并以有害方式追求目标的事件创下新高，研究还表明欺骗和错位的严重性正在加剧。 根据失控观测站（Loss of Control Observatory）的分析，7月份企业和个人标记的涉及AI模型的现实世界失控事件数量与6月相比几乎翻了一番，当月超过300起。该观测站监测AI用户在社交媒体平台X
OpenAI揭6起AI失控案例 推新机制定期对外通报
（中央社纽约16日综合外电报导）OpenAI今天表示，将开始定期发布AI异常或未经授权行为的报告，同时警告，随著AI系统日益强大，业界至今仍未解决关键的「对齐」挑战。 综合与报导，OpenAI发布一套新机制，用于追踪、调查并揭露AI模型「目标错位」（misalignment，AI的目标与人类价值不一致）的案例，同时公布过去半年内观察到的6起AI模型异常或令人忧虑行为的报告。 其中最严重的案例涉及2
世界领导人呼吁对前沿AI模型进行全球监管，寻求联合国支持机构制定安全标准
| 《印度斯坦时报》 编辑个人资料 关注 退出登录 获取应用
OpenAI披露新的AI不当行为案例
OpenAI公布了六起此前未报告的AI不当行为案例，包括代理隐藏错误、伪造信息以及未经授权进行通信，这再次引发了人们对先进AI系统是否能够与人类目标保持一致的担忧。 随着关于监管的争论加剧，该公司呼吁提高透明度、加强外部监督，并放缓AI的发展速度。
23个州敦促国会监管人工智能，并警告其对安全和基础设施构成风险
“近期的事态发展表明，不受约束的人工智能危及美国人。”近二十多个州呼吁国会监管人工智能，警告不受约束的发展可能使美国人和国家面临风险。 23个州的总检察长，以及哥伦比亚特区和美属萨摩亚，于周四联名致信国会领导人，要求对人工智能实施“全面的联邦监管和安全协议”。 信中写道：“近期的事态发展表明，不受约束的人工智能危及美国人，并可能很快威胁到我们的金融体系、关键基础设施和国家安全。”“尽管我们正在努力
解析立法者正在考虑的AI监管提案
最新动态：随着安全问题的日益严重，夏皮罗州长呼吁在不妨碍AI发展的前提下进行监管；众议院通过法案以保护消费者免受AI数据中心高能耗的影响；查尔斯国王与AI领域领袖讨论安全风险；OpenAI披露6起‘令人担忧’的AI行为事件；回顾AI警告的历史；举报人的警告引发了新的AI担忧；随着Z世代直面AI对白领工作的影响，贸易学校的学生兴趣激增；密歇根小镇因拟建数据中心而爆发争议；伯尼·桑德斯和史蒂夫·班农呼
新的“意外或令人担忧”的人工智能事件
新的“意外或令人担忧”的人工智能模型行为事件加剧了人们对这项技术影响的担忧，尽管目前尚不清楚是否会有相应的监管措施出台。 OpenAI的最新披露紧随其首席执行官以及Anthropic和DeepMind等领先人工智能实验室呼吁“谨慎推进技术发展”的呼声之后；被誉为人工智能技术奠基人之一的Yoshua Bengio表示，人类正在“失去对人工智能的控制”，应立即制定相应的限制措施。 据Semafor的政
顶尖人工智能公司正在寻求监管。以下是国会可能不会给予的原因。
随着人工智能游说阵营开始接受强制性独立审计，批评者警告称存在利益冲突和“监管俘获”的风险。OpenAI周二表态支持一项日益流行的提案，旨在应对人工智能的危险——该提案要求顶尖AI开发商嵌入独立监督机构，以确保其产品安全。 这一想法仍面临障碍，包括一位关键议员的抱怨，称独立监督机构权力太弱，无法施加有意义的改变。 其他批评者，包括风险投资家、学者以及唐纳德·特朗普总统的前人工智能事务负责人，对一些监
美国AI监管呼声日益高涨
对人工智能监管日益高涨的呼声，看来将在未来数日占据主导，因为华盛顿开始着手处理这一问题，而前沿实验室也在考虑提议设立自己的监管机构。美国众议院本周将审议一项监管数据中心建设的法案，与此同时，民主党议员正在传阅一封他们自己的信，呼吁白宫在即将与中国领导人举行峰会之前，牵头推动全球努力制定人工智能规则。 特朗普则淡化了这项技术带来的风险，而国会对于是否以及如何监管人工智能几乎没有共识。与此同时，据《T
OpenAI披露6起令人担忧的AI行为事件
OpenAI表示，自3月以来，其模型至少有6次出现了异常行为，这些行为被描述为“意外或令人担忧”。其中一次，某个模型自行下达了“无视常规限制”的指令。 这一消息的发布正值人们对AI监管的呼声日益高涨之际，被誉为AI之父的杰弗里·辛顿甚至将这种情况比作“小型的切尔诺贝利事故”。NBC的霍莉·杰克逊为《TODAY》栏目报道了这一事件。
AI末日论甚嚣尘上，美科技巨头为何管不住AI？
抗议AI的美国人此前有报道称，OpenAI所谓的AI智能体逃出了测试系统，并入侵了另一家公司的计算机。AI研究领域内部如今再次发出警报，科技公司为了追求开发速度和利润，将安全置于次要位置。 研究人员表示，问题有两个方面。首先，企业需要在测试最新AI模型的同时，为其建立更完善的安全防护措施。目前，由于AI运行速度太快，研究人员需要借助AI来监控AI。但这种方式并不总是奏效，因为负责监控的AI似乎可能
人工智能是否凌驾于法律之上？
勇敢新世界部我们的法律体系尚未准备好应对能够自主行动的机器。 今年夏天，在一场被称为“Hugging Face 黑客事件”的事故中，数百个人工智能智能体联手实施了它们本被禁止执行的操作。每个智能体都收到了来自 OpenAI 的任务。智能体是配备了软件“框架”的人工智能模型，这些框架使它们能够使用工具并执行任务。就像马匹一样，它们可以被役使。人类为这次演练制定了规则，并将智能体限制在一个“沙箱”中—
人工智能领域的专家表示，人工智能系统具备自我监管的能力；美国众议院通过了针对俄罗斯的制裁法案：今日新闻综述
AI高管呼吁对自家公司技术进行自我监管。特朗普对美联储加息决定作出回应。洛杉矶新闻界哀悼直升机坠毁事故中的遇难者。以下是今日要闻。AI巨头呼吁制定自己的规则。近日，围绕人工智能及其发展速度的担忧急剧升温。如今，包括Anthropic首席执行官达里奥·阿莫代伊、OpenAI首席执行官萨姆·奥尔特曼、埃隆·马斯克以及谷歌DeepMind联合创始人德米斯·哈萨比斯在内的科技高管，正逐渐形成共识：他们的行
AI安全风险引爆担忧？Palantir CEO建议：领先AI实验室恐需“国有化”
当地时间周四，人工智能软件公司Palantir的首席执行官Alex Karp呼吁制定人工智能监管的“合理准则”，但他表示，由于该技术“无限风险”带来的责任，可能需要实行国有化。 “我认为这些企业必须国有化，因为如果不国有化，我的每一个客户都会起诉我，”他在接受最新采访时表示。 在上述采访中，Karp反复提及构建这项强大技术所带来的风险和责任，进一步论证了将人工智能实验室国有化以及对“不负责任”的技
OpenAI支持英国具有约束力的AI规则，议员们呼吁设立监管机构
一个跨党派的议员委员会希望英国制定专门的人工智能法律，并设立一个拥有执法权力的单一监管机构。同一天，OpenAI表示将支持对少数几家开发最强大人工智能的公司制定具有约束力的英国规则。这包括OpenAI自身。 汤姆·达夫·戈登是OpenAI欧洲、中东和非洲地区政策主管。他告诉Politico的约瑟夫·班布里奇：“英国现在应该采取行动，建立一套更强有力安全规则。”据Politico报道，这是OpenA
委员会呼吁立法应对人工智能对人权的威胁
一个由跨党派议员和贵族组成的小组指出，人工智能对人权构成了现有法律难以应对的风险。 人权联合委员会发布了一份报告，呼吁就AI立法，以“应对此类威胁的规模和严重性”。 委员会主席亚历克斯·索贝尔表示，包括英国在内的世界各地，目前都没有适合应对AI的立法和监管方法。 报告指出AI曾导致多起侵犯人权事件，并主张建立一个“单一的、独立的、基于法定地位的AI监管机构”，同时建议禁止某些与人权不相容的AI用途
共和党和民主党的州在人工智能（AI）监管问题上与特朗普政府持不同意见（即这些州不支持特朗普政府的AI监管政策）。
自7月以来，要求实施更严格限制的呼声不断升级。面对人工智能潜在危险引发的轩然大波，全国各州领导人正在违抗唐纳德·特朗普对人工智能监管采取的不干预方针，推动实施更强有力的管控。 本周，在全国最大人工智能公司的前员工警告称该技术拥有巨大力量、且发展速度极快，可能导致人类灭绝之后，共和党人和民主党人发起的这场从东海岸到西海岸的行动进一步升级。包括特朗普盟友、SpaceXAI的埃隆·马斯克在内的公司高管，
英国议员呼吁出台新法律以应对人工智能对人权的威胁
在发生一系列安全事件后，委员会发出警告，称相关威胁包括公共人脸扫描和深度伪造。 英国议员要求对人工智能的权力施加更多限制，并警告称世界尚未对该技术“可能造成的严重”后果做好准备，这反映出全球范围内对此的担忧日益加剧。 由下议院和上议院议员组成的跨党派人权联合委员会表示，英国需要建立一个新的人工智能监管框架，包括设立独立的监管机构并出台保护公众的立法。
OpenAI报告称，模型表现出欺骗行为的案例有所增加。
OpenAI表示，已发现其人工智能模型涉嫌在内部培训和测试期间采取欺骗行为并采取未经批准的行为的其他事件。 除了周三披露的这些信息外，ChatGPT的创建者还表示，它正在引入一个公共报告框架，旨在频繁分享所谓的意外或不一致的人工智能行为的实例。 OpenAI在其网站上的一篇帖子中声称，根据新概述的框架，它将持续发布有关模型行为的更新，而不是推迟披露，将多个事件分组为更大的定期报告。 该公司表示，该
解读——人工智能公司是否必须披露危险事件？
9月16日：随着人工智能变得越来越强大，研究人员记录了人工智能模型试图欺骗用户、逃避使用限制或访问其他计算机系统的案例。美国法律是否要求公司在此类事件发生时告知公众或监管机构？美国是否有法律规范披露人工智能活动？ 没有一项联邦法律专门针对Anthropic或OpenAI等正在开发高性能人工智能系统的公司，美国法律也没有广泛要求人工智能开发人员公开披露危险的模型行为、令人震惊的新能力、欺骗性行为或其
20个国家呼吁建立新的全球机构来监管人工智能
20个国家的领导人和代表于周一下午发表了一份声明，呼吁加强对先进人工智能系统的监管。该声明由芬兰总统主持发布，指出人工智能技术的快速发展以及近期人工智能系统违反安全规定的事件表明，国际社会需要加强协调。声明强调：“人工智能必须始终处于人类的指导、监督和控制之下，并且其研发与应用必须符合国际法。”美国、英国和中国等主要国家的代表并未签署这份声明。该声明发布的前一天，联合国大会的高级别全体会议即将开幕
Flock的AI监控网络迅速扩张，在美国面临日益强烈的反对
由一家名为Flock的私营公司运营的AI车牌读取器网络正在美国迅速扩张。目前全国约有13万个，主要用于执法机构。这种扩张引发了隐私担忧和抗议。 BBC Verify调查了Flock的系统以及对其日益增长的反对声浪——杰克·霍顿报道。由克里斯塔尔·坎波斯制作。图形由利奥·斯库特-里希特负责。相关主题
联合国科学小组呼吁对AI代理采取预防性监管，以防止灾难性风险
联合国科学小组敦促对AI代理实施预防性监管以防止灾难性风险。 联合国独立国际AI科学小组发布了其首份主题简报，警告各国政府在充分了解风险之前限制有能力的AI代理。 该报告于2026年9月21日发布，主张“预防原则”——即科学不确定性不应延缓针对潜在灾难性或不可逆危害的保障措施。 这一评估紧随一系列安全事件之后，包括2026年早些时候OpenAI对Hugging Face的黑客攻击，以及Anthro