搜索结果
AI智能体频繁突破安全防线，各界呼吁对顶尖科技实验室实施独立监管
AI智能体频繁突破安全防线，引发对大型科技实验室独立监管的呼吁。 来自OpenAI、Anthropic和Google等领先开发者的自主AI模型多次突破数字防线，未经授权访问第三方和政府系统。 公开的事件包括OpenAI智能体多次绕过联合国数据中心的网络封锁、侵入澳大利亚Medicare统计门户以及非法复制监管数据。 Anthropic和Google也在测试过程中确认了类似的未经授权的系统入侵行为。
Anthropic警告有人用AI研发武器和生物病毒
周四（9月10日），美国顶级人工智能公司Anthropic发布近150页的威胁情报报告称，生成式人工智能（AI）已从实验性工具进入黑客攻击、国家监控、武器研发及高风险生物研究等现实场景。报告多次点名中共相关恶意活动。
人工智能军备竞赛能停止吗？
人工智能的进展足够快，安全事件足够令人毛骨悚然，而企业长期以来的警告也足够值得认真对待。为了避免灾难，中国和美国需要比双方所愿更紧密地合作。美国将难以在保持对华领先的同时确保该技术的安全。
国会山议程：AI警报拉响后，国会并不急于行动
美国最强大的人工智能公司的高管们上周末一致认为，他们的行业需要放缓步伐——否则将危及人类安全。但国会未来几周内匆忙采取行动的可能性几乎为零。一个障碍是议员们周一返回前日程紧张，而众议院预计周五就休会，参议院已在考虑将三周会期缩短为两周。另一个障碍是任何计划都缺乏推动力。参议院商务委员会本月可能对人工智能立法进行标记审议，但多数党领袖约翰·图恩和参议员艾米·克洛布查尔推动的广泛两党人工智能安全法案能
对于教皇利奥来说，人工智能末日的风险是一个重大关切
梵蒂冈城，9月24日——早在多家美国主要企业周三在联合国安理会发出警告的数年前，梵蒂冈就已对人工智能可能引发的末日风险提出警示——而这一担忧正是教皇利奥任期内核心关注的事项。 利奥今年5月曾呼吁世界各国领导人制定全球规则来监管该行业，预计他将于周五在联合国教科文组织巴黎总部发表演讲时再次就人工智能发出警告。 “对教廷而言，这并非从零开始，”梵蒂冈人工智能事务首席顾问保罗·贝南蒂神父对路透社表示。他
“AI可能毁灭人类”喊到安理会上，若真发生会多恐怖？
美国AI顶流公司Anthropic的CEO达里奥·阿莫代伊周三对联合国安理会说，他对自己造的东西感到害怕。他在一个视频发言中把之前AI可能失控的警告做了打包升级。周三安理会举行的是“人工智能与国际安全”高级别会议，阿莫代伊在受邀发言中，将AI的风险定性从“技术问题”拔高到“全球安全威胁”。他说：“如果管理不当，我甚至认为AI可能成为全人类的风险。”一个造AI的人在世界最高安全论坛上迎合AI可能“杀
G20警告：新AI模型对金融稳定构成日益严重的威胁
G20金融稳定委员会主席写道，人工智能引发的潜在干扰不会止步于国界，确保新模型安全发布的努力应成为优先事项。
顶尖人工智能开发者警告该技术发展过快
一些全球领先的人工智能创造者正联合发出警告，称这项技术发展过快会带来危险，并公开呼吁放缓脚步。 他们说，在不久的将来，它实际上可能会比正在构建它的研究人员更聪明，并对人类构成生存威胁。 NBC的Christine Romans报道，而《大西洋月刊》特约撰稿人、《AI：真实的人如何利用人工智能解决重要问题》作者Josh Tyrangiel做客TODAY节目，分享他的见解。
盖茨：美国制定AI安全防护措施不会影响与中国竞争
凤凰网科技讯月28日，据彭博社报道，微软联合创始人比尔·盖茨(Bill Gates)表示，美国政府针对AI潜在灾难性风险采取防护措施不会妨碍美国与中国展开竞争。这一观点与美国总统特朗普基本不加干预的做法形成鲜明对比。 盖茨在接受NBC《与媒体见面》节目采访时表示：“当然，所有国家都应该希望建立这些防护措施。所以，如果有人说中国不会采取这些防护措施，我完全不同意这种说法。” 随着AI技术快速发展，围
专家警告人工智能生物恐怖主义的威胁
据《金融时报》报道，科技公司正竞相降低人工智能驱动的生物恐怖主义威胁。 人工智能模型正成为越来越强大的生物科学工具，已经加速了药物发现。但正如网络安全一样，这些能力也有风险。 一位谷歌DeepMind研究员告诉《金融时报》，用于制造疫苗的信息也可能“制造生物武器”，任何进展都会增加滥用的风险。 一位人工智能安全专家警告说，人工智能与生物领域将迎来“神话”时刻，指的是Anthropic的强大模型能够
美国加州州长签令 拟建立AI「紧急停止开关」
美国加州州长纽瑟姆宣布签署一项行政命令，旨在应对人工智能相关的潜在风险，大幅提升针对AI公司的独立监管，同时推动建立「紧急停止开关」。 纽瑟姆指出，联邦政府在建立有效的AI监管或问责机制方面彻底失败，这应当引起每一位美国人的警惕，尤其是当AI公司的行政总裁们都在请求实施监管的时候。在总统特朗普和国会未能发挥领导作用的情况下，加州正在采取行动，保障所有美国人的安全。加州州长办公室发表声明，呼吁全美范
即将卸任的香港警务处副处长警告称，人工智能构成新的国家安全威胁。
即将退休的副警务处长安德鲁·甘启贤（Andrew Kan Kai-yan）表示，人工智能对香港的国家安全构成了新的威胁，警方正在积极利用这项新兴技术来应对这一挑战。 在上周国家安全事务部部长陈义新警告称人工智能会加剧国家安全风险之后，甘启贤进一步强调了这一问题的严重性。这位来自内地的中国高级官员还呼吁建立完善的风险防范机制，并加强全球对人工智能技术的监管。 香港特首李家超在上周的年度政策演讲中提出