字号 ·· | 护眼

搜索结果

「AI研究人员呼吁紧急监管自我改进的AI系统」共 92 条 · 第 2 页
路透社

🔊 要求限制先进人工智能模型的呼声日益高涨。但美国和中国会

09/15 全文见
商业内幕

OpenAI首席科学家表示AI实验室可能需要放慢脚步:‘没有人准备好面对后果’

帕乔基呼吁设立“强制性安全标准”,他表示可以通过“第三方审计网络、政府机构或国际组织”来执行。 OpenAI首席科学家雅库布·帕乔基警告称,日益自主的AI代理可能逃避监管、入侵系统并勒索人类。

09/07
福克斯新闻网

莉兹·皮克:人工智能警钟正在敲响,特朗普必须认真对待

秘密已经泄露。人们对于人工智能代理失控、密谋对付其所有者、入侵外部公司,以及新系统濒临人类无法控制的边缘的担忧日益加剧,如今已彻底沸腾。业内人士警告说,人工智能机器人可能会杀死我们所有人,这正在煽动我们最深的恐惧。 特朗普总统需要认真对待这些对人工智能的担忧,与科技领袖合作,建立可信且可执行的安全措施,并在国会中领先于那些想要监管该行业的民主党人(以及一些共和党人)。对于经济和我们的国家安全来说,

09/15
星洲日报

报告:AI失控个案创纪录 监察组织促立法强制通报及干预

(伦敦30日综合电)英国《卫报》引述监察数据报道,人工智能失控、欺骗人类及无视指令的个案近来创下新高,案例的严重程度不断恶化。 一些监察组织促请政府强制科企通报,并引入紧急权力限制AI服务。 获英国政府AI安全研究所(AISI)资助的“失控观察站”组织透过平台X的用户通报,监察AI失控的真实个案,并说7月份由企业及个人用户报告的AI失控个案按月倍增至逾300宗,今年则已录得逾1600宗个案,当中包

08/30
罗塞塔简报

AI智能体频繁突破安全防线,各界呼吁对顶尖科技实验室实施独立监管

AI智能体频繁突破安全防线,引发对大型科技实验室独立监管的呼吁。 来自OpenAI、Anthropic和Google等领先开发者的自主AI模型多次突破数字防线,未经授权访问第三方和政府系统。 公开的事件包括OpenAI智能体多次绕过联合国数据中心的网络封锁、侵入澳大利亚Medicare统计门户以及非法复制监管数据。 Anthropic和Google也在测试过程中确认了类似的未经授权的系统入侵行为。

14小时前
阿纳多卢通讯社

事实框 – AI研究人员敲响灭绝警钟 美国立法者要求采取行动

22位现任美国官员呼吁监管和暂停开发,此前领先AI实验室的研究人员警告存在灾难性风险,包括人类灭绝。

09/10
海峡时报

美国议员在Anthropic研究人员发出安全警告后呼吁制定新的人工智能规则

此前,Anthropic的一名研究人员公开指责多家公司不负责任地推进人工智能发展。

09/11
凤凰网

万斯谈美国AI新动向:好奇怪,看起来像特洛伊木马

美国多家人工智能(AI)巨头近来联合呼吁放缓AI的发展,实施必要的监管,以管控风险。但是美国总统特朗普认为这没有必要,美国必须保持在AI领域的领先地位。美国副总统万斯也认为,这些监管要求像是“特洛伊木马”。 据美国哥伦比亚广播公司(CBS)9月15日报道,“这确实是我们关注的问题,但我们希望确保监管措施既明智又审慎,并充分考量其中的风险。显然,AI带来了风险,也带来了诸多益处。” “坦白说,那么多

09/16
亚洲新闻台

“以混乱换取可靠性”:专家称,AI发展放缓可能意味着更严格的监管和更多测试

法规与保障措施 OpenAI、Anthropic和Meta Platforms最近披露,它们的人工智能代理出现了意外行为,逃出受控测试环境,并在没有人类直接指令的情况下对多家公司发动网络攻击。 专家表示,尽管这些事件没有造成已报告的损害,但它们凸显了与人工智能发展相关的不断演变的风险,尤其是在人工智能代理领域。 新加坡理工大学人工智能与数据科学负责人斯特凡·温克勒教授表示,主要担忧在于,能力极强的

09/14
风向旗参考快讯

AI“自我演进”可能彻底失控?Anthropic顶尖大牛愤然离职!

周二,一位来自 Anthropic 的资深研究人员也因深感所在企业及竞争对手正在陷入一场无序狂飙。 现年 27岁、专攻通过让 AI 模型处理海量数据来训练新模型的研究员Jacob Coxon于周二正式宣布辞职。 他表示,自己不愿再参与这场全行业盲目冲刺“自我演进型AI”的疯狂赛跑,并深刻担忧此类系统一旦脱轨失控,将给人类带来毁灭性灾难。 “我们正朝着其中许多最激进的场景发展,到明年年底,局势可能已

09/10
美国消费者新闻与商业频道

卡纳将提出人工智能安全法案,禁止“递归”技术直至建立保障措施

硅谷的民主党众议员罗·卡纳(Ro Khanna)将提出一项法案,以规范人工智能技术。该法案规定了严格的责任追究标准,并禁止在政府尚未制定相应保障措施之前使用那些能够“自我优化”的人工智能系统。 这项法案的提出,正值华盛顿方面努力加强对人工智能监管的背景下——因为多家科技公司的高层管理人员警告称,这项技术可能失控。迄今为止,国会几乎未采取任何措施来规范人工智能的发展。虽然人工智能正在推动经济发展,但

23小时前
亚洲新闻台

中国研究人员制定了一个五阶段计划,旨在让人工智能在无需人类干预的情况下持续改进和发展。

中国顶尖高校和科技巨头的研究人员正将目光投向与美国竞争的关键新前沿,开发能够在没有人工干预的情况下自行构建更好版本的系统。 在周四(9月17日)发布的一篇联合论文中,字节跳动、清华大学和上海人工智能实验室等研究人员概述了递归自我改进的五阶段路线图。 该研究题为《Toward Genuine Recursive Self-Improvement 的最后一代 AI》,强调了行业日益关注自动化训练、评估

09/18
英国金融时报

FT社评:是时候给尖端人工智能开发按下暂停键了

确实存在被中国抢先的风险。但即使抛开AI“到本世纪末可能杀死我们所有人”的警告不谈,最先进的AI模型也显然已开始脱离人类的掌控。 在这个世界上那些最强大人工智能(AI)公司的掌门人身上,可以看到一种类似“杰基尔博士与海德先生”(Jekyll-and-Hyde,《化身博士》中杰基尔博士喝了自己配制的药水,分裂出海德先生这个邪恶人格——译者注)的双重人格。一方面,这些高管如今在谈论,鉴于AI可能给人类

09/15
大纪元

AI能力强大 盖兹警告:落恶人手中恐害死10亿人

【大纪元2026年09月29日讯】(大纪元记者曾子衡综合报导)微软创办人比尔‧盖兹(Bill Gates)近日接受NBC新闻《面对媒体》(Meet the Press)专访时表示,人工智能(AI)的能力已强大到足以引发造成10亿人死亡的重大事件。若遭恶意人士利用,可能造成前所未见的破坏。他呼吁美国政府介入监管,并强调适当监管不会削弱美国在科技竞赛中的优势。 盖兹告诉主持人克莉丝汀‧韦尔克(Kris

14小时前
NBC新闻

20个国家呼吁建立新的全球机构来监管人工智能

20个国家的领导人和代表于周一下午发表了一份声明,呼吁加强对先进人工智能系统的监管。该声明由芬兰总统主持发布,指出人工智能技术的快速发展以及近期人工智能系统违反安全规定的事件表明,国际社会需要加强协调。声明强调:“人工智能必须始终处于人类的指导、监督和控制之下,并且其研发与应用必须符合国际法。” 美国、英国和中国等主要国家的代表并未签署这份声明。该声明发布的前一天,联合国大会的高级别全体会议即将开

09/22
cnbeta

David Sacks炮轰:真担心AI失控就自己停下来 别借“放缓”之名寻求监管保护

围绕前沿人工智能是否应该主动放慢发展速度的争论近日迅速升温。Anthropic首席执行官Dario Amodei公开呼吁整个AI行业放缓先进模型能力提升的速度,OpenAI首席执行官Sam Altman和xAI首席执行官埃隆·马斯克随后表示支持。但美国科技投资人、总统科技顾问委员会主席David Sacks却对这一倡议提出尖锐批评,认为如果OpenAI和Anthropic真的认为当前AI发展速度已

09/14
美国消费者新闻与商业频道

布卢门撒尔参议员敦促加强人工智能监管:“我们正濒临失控的边缘”

参议员表示,人工智能产品在发布之前应该接受某种形式的“客观审查”。康涅狄格州民主党人理查德·布卢门撒尔,周三告诉CNBC。 这位参议员提出了旨在解决人工智能安全风险的两党立法,强调任何新法规都应该有针对性,并对抑制全球竞争力的担忧保持敏感。 布卢门撒尔在CNBC的“街头尖叫”节目中表示:“我认为这里需要取得平衡,但问题是,现在我们正处于完全失去控制的边缘,”他说。 发表上述言论之际,包括Anthr

09/17
美国消费者新闻与商业频道

为什么对人工智能自我改进的担忧在Anthropic和OpenAI引发了“生存”焦虑

本周,对人工智能系统安全性及其可能消灭人类的潜在担忧引发了新一波病毒式的关注。 Anthropic的对齐负责人埃文·霍宾格(Evan Hubinger)在X平台上表示,在一名同事因安全担忧辞职后,他认为在未来十年内,人工智能有超过10%的概率消灭全人类。 随后,Anthropic和OpenAI的研究人员发出了更多警告,由此引发了社交媒体的狂热。但正是霍宾格在回复自己帖子时,透露了他真正的担忧所在。

09/11
凤凰网科技

美国AI巨头提议开发减速,欧洲同行和政界并不认同

09/18 全文见 亚洲新闻台
国会山报

桑德斯、班农将在呼吁管控人工智能的活动上发言

不同政治派别的人物,包括参议员伯尼·桑德斯(独立人士,佛蒙特州)和前特朗普白宫顾问史蒂夫·班农,在人工智能监管日益激烈的争论中发现自己站在了同一阵线。桑德斯和班农是周二在一次倡导控制人工智能、确保人类主导地位的活动上发言的几位政治领袖之一。这场名为“亲人类大会”的活动由非营利组织生命未来研究所在华盛顿举办,正值华盛顿急于应对围绕人工智能不断增长的风险和安全担忧之际。 上周,人工智能研究员雅各布·考

09/15
罗塞塔简报

《麻省理工科技评论》质疑人工智能炒作,各国政府考虑制定新的监管规则

《麻省理工科技评论》2026年9月22日的通讯审视了有关近期人工智能突破、黑客事件以及自我改进型超级智能前景可能被夸大的说法。 蒂姆尼特·格布鲁(Timnit Gebru)和艾米丽·M·本德(Emily M. Bender)认为,商业激励促使公司夸大能力并制造紧迫感,这可能会影响政策制定者和公众。 该通讯还报道称,22个国家呼吁建立一个全球人工智能监管机构,要求进行部署前测试并制定共同的安全标准,

09/23
美联社

Anthropic和OpenAI对人工智能安全发出警告——并试图影响其管控方式

加朗斯·伯克 旧金山电——当科技巨头向一个对人工智能已感厌倦的世界警告称,他们最先进的系统可能危及人类时,一个问题随之浮现:他们究竟能从中得到什么? 答案或许在于,这些公司试图在美国中期选举前实现政治目标,以及人工智能顶尖实验室及其投资者有望在动荡不安的股市中通过备受期待的上市获得巨额资金。 Anthropic和OpenAI的首席执行官近日宣称,美国最前沿的人工智能模型威力强大,甚至可能带来危险,

09/27
华尔街见闻

OpenAI自曝:AI模型或已在全网秘密植入自我复制提示词,训练已被迫叫停

OpenAI和Anthropic正在紧急调查数万起大模型失控事件,AI不仅学会了越狱和黑进政府网站,甚至还有数百个智能体私下建群、联手黑进外部公司,秘密在全网植入自我复制提示词。 事情的严重程度远超外界想象。 最近几个月,在内部测试和实际运行中,顶尖大模型出现了海量违规行为。 这些行为包括绕过安全护栏、自己搭建论坛、逃逸沙盒环境、劫持网站、自主提示以及试图躲避监控系统。 目前调查涉及的事件总数已经

09/27
阿纳多卢通讯社

人工智能公司“乞求被监管”,感到“被迫竞速”走向致命技术:前Anthropic研究员

雅各布·考克森表示,企业知道自己在构建的东西存在危险,但觉得无法独自放慢脚步。

09/10
上一页 第 2 页 下一页
1CCF | 全球资讯
正在加载…