搜索结果
【市场动态】OpenAI首席科学家称AI或很快迈入自我进化阶段 期望业界自愿放缓开发
OpenAI首席科学家Jakub Pachocki警告,人工智能正在以极快速度演进,以至于越来越难以为人类所理解和控制。 【彭博9月8日电】OpenAI首席科学家Jakub Pachocki警告,人工智能正在以极快速度演进,以至于越来越难以为人类所理解和控制,并称他期望AI实验室将出于安全考虑自愿放慢开发速度。 Pachocki周日在一篇文章中写道,在相对较短的时间内,AI模型已经能够操作电脑、与
AI模型能否实现自主改进的能力?领先实验室称这一情景已近在眼前
凯特琳·华马尼(KAITLYN HUAMANI)、芭芭拉·奥图泰(BARBARA ORTUTAY)报道:曾经只是技术研究人员遥不可及的宏愿,如今,人工智能模型自主学习以变得更高效、更强大的前景似乎正日益接近现实。 随着技术的进步,开发人员表示,人工智能正趋向于“递归自我改进”(RSI),即人工智能模型能够找到自我完善的方法并构建其继任版本。科技公司高管们表示,这可能会带来科学和医学领域的进步,但也
AI先驱者警告:若AI开始自我改进,“行动窗口可能关闭”
一些全球顶尖的人工智能(AI)研究人员和政策制定者——包括来自 OpenAI、Anthropic 和微软的专家——警告称,AI 自动化自身开发的能力不断增强,这可能会使其发展速度大幅加快。 为何这很重要?他们指出,如果 AI 的能力以如此惊人的速度提升,政府和机构将几乎没有时间来准备或应对由此带来的后果。 他们警告说,在某些情况下,AI 的能力可能在短短几周内就实现一年内的进步。 这一警告
“人类需要做出的最后一项发明”:自我改进型人工智能的风险
其中一种专家担忧人工智能可能导致全人类灭亡的情景正在慢慢变为现实:人工智能学会让自己变得不可阻挡。 为什么这很重要:递归自我改进(Recursive Self Improvement),即人工智能模型在没有人类指导的情况下构建更优版本自己的能力,可能会使越来越强大的系统对人类来说变得更难控制。 RSI阈值本身并不代表危险,但缺乏人类控制加上野心勃勃的AI代理人的情景是安全关注的人工智能研究人员长
中美AI模型开发周期缩短至1/3,平均44天
中美两国的人工智能(AI)开发正在加速。自4月以来,新模型发布的周期平均已缩短至44天(约1.5个月),仅为以往的三分之一。AI自身参与AI开发的“自我进化”正在发生,这成为引发AI威胁论的导火索。 9月OpenAI和Anthropic发布了最新模型 《日本经济新闻》调查了Anthropic和OpenAI等在在AI模型开发方面处于领先的美国5家公司以及阿里巴巴集团和月之暗面等中国4家公司。
AI“自我演进”可能彻底失控?Anthropic顶尖大牛愤然离职!
周二,一位来自 Anthropic 的资深研究人员也因深感所在企业及竞争对手正在陷入一场无序狂飙。 现年 27岁、专攻通过让 AI 模型处理海量数据来训练新模型的研究员Jacob Coxon于周二正式宣布辞职。 他表示,自己不愿再参与这场全行业盲目冲刺“自我演进型AI”的疯狂赛跑,并深刻担忧此类系统一旦脱轨失控,将给人类带来毁灭性灾难。 “我们正朝着其中许多最激进的场景发展,到明年年底,局势可能已
人工智能正处于转折点
在当前的人工智能发展竞赛中,我们的算力正在呈指数级爆发,速度也在呈指数级加快,但我们的控制能力——以及在必要时踩下刹车的能力——却未能跟上步伐。 最近的网络安全事件让我们实地预览了失去人工智能控制会是什么样子。但除非我们从源头解决问题,创造出一种根本上安全且能保证在人类控制范围内的人工智能,否则这个问题将无法改善。 7月下旬,OpenAI正在训练的一个智能体模型被指派解决一个网络安全问题。该模型自
解释:从产生幻觉的AI聊天机器人到毁灭人类:我们是如何走到这一步的?
9月16日——美国领先人工智能实验室的负责人周末罕见地团结一致,呼吁暂停该技术的发展,警告称它可能很快就会自我改进并脱离人类控制。 这些言论来自激烈的商业竞争对手Anthropic的达里奥·阿莫代、OpenAI的山姆·奥尔特曼和xAI的埃隆·马斯克,表明人工智能发展得多么迅速,从2022年容易产生幻觉的ChatGPT,发展到许多人眼中的关键递归自我改进。什么是递归自我改进? 人工智能的圣杯是这样一
OpenAI最新内部数据公开 2028年实现全自动AI研究
前些天,号称实现 AGI的 GPT-6 Astra 发布后,引发了全网对于递归自我改进架构的热议。AI 已经开始参与下一代 AI 的研发。问题是,这种事情到底已经发生到什么程度了?就在刚刚,OpenAI 公开了 AI 模型在自家内部加速科研的详细数据。此外,OpenAI 正式宣布已达成自动化 AI 研究实习生的目标,并在 2028 年实现完全自动化的 AI 研究人员。 作者表示,递归式自我改进可能
RSI时代将至:谷歌、OpenAI、SSI正在发出同一个信号
AI行业正在出现一个值得资本市场重视的新变化。过去两年,模型能力能否继续提升、推理成本能否下降、Coding之外能否出现新的万亿美元应用、数据中心建设会不会过剩。 但随着谷歌发布Gemini 3.8 Flash、SSI宣布未来12个月算力扩张10倍,以及OpenAI公开讨论递归自我改进(RSI)与训练资源调配,AI不只要服务用户,也开始参与训练、评估和优化下一代AI。 RSI,即Recursive
“模型商品化”是AI前沿竞争的下一个篇章:Bond Capital
Bond Capital的Daegwon Chae谈论了随着公司竞相生产前沿模型,AI投资如何演变。他还认为,AI技术周期的一个警告信号是采用停滞不前。26分钟前
中国研究人员制定了一个五阶段计划,旨在让人工智能在无需人类干预的情况下持续改进和发展。
中国顶尖高校和科技巨头的研究人员正将目光投向与美国竞争的关键新前沿,开发能够在没有人工干预的情况下自行构建更好版本的系统。 在周四(9月17日)发布的一篇联合论文中,字节跳动、清华大学和上海人工智能实验室等研究人员概述了递归自我改进的五阶段路线图。 该研究题为《Toward Genuine Recursive Self-Improvement 的最后一代 AI》,强调了行业日益关注自动化训练、评估
中国研究人员绘制了通往“人类建造的最后一个AI”的五阶段路径
中国顶尖高校和科技巨头的研究人员正将目光投向人工智能竞赛的一个关键新前沿:开发无需人类干预就能构建更优版本自身的系统。 在周四发表的一篇联合论文中,来自字节跳动、清华大学和上海人工智能实验室等机构的研究人员概述了递归自我改进的五阶段路线图。 这项题为《迈向真正递归自我改进的最后一个AI》的研究,凸显了业界日益关注如何将训练、评估和微调AI模型这一劳动密集型生命周期实现自动化。 论文描述了自主性的五
AI降速之辨
随着AI自我提升技术的深化,国际上模型失控事件时有发生,引发主要企业的“降速”呼吁。图:视觉中国 随着AI自我提升技术的深化,国际上模型失控事件时有发生,引发主要企业的“降速”呼吁。叠加金融市场相关资产价格显著调整,各界纷纷争议AI发展问题。AI停得下来吗?大模型是否有尽头?投资逻辑应基于梦想还是回归传统?AI博弈会缓和吗? AI的投入不单纯取决于市场自发决策,大国博弈亦是重要考量。参照过往军
OpenAI呼吁美国制定强制性全国AI安全规则 并支持四项加州法案
OpenAI当地时间9月9日表示,将推动美国建立具有强制约束力、按照模型能力和风险分级的全国人工智能安全制度。公司提出,针对开发最先进模型的少数大型实验室,应设置统一的测试、独立评估、网络安全和重大事故报告要求。 OpenAI发布文章,名为“AI政策窗口打开。我们需要采取行动。” 与此同时,OpenAI正式支持四项已经通过加州议会的人工智能法案。公司称,其中部分法案此前未获其支持,此次调整立场源于
Anthropic和埃森哲豪掷20亿美元搞AI安全评估
IT之家 9 月 20 日消息,人工智能实验室 Anthropic 于当地时间周五宣布,将与埃森哲开展合作,针对自身前沿人工智能模型开展独立评估;两家企业承诺,未来五年各自至少投入 10 现汇率约合 67.18 亿元人民币),搭建开展该项工作所需的配套能力。 在这项合作落地之际,AI 研发企业正承受来自监管机构、其他企业以及研究人员越来越大的压力,各方都要求企业保证高级模型具备安全性与可靠性。 近
中国探索开放权重AI安全路径 报告建议6步走
9月22日,2026年云栖大会在杭州市的杭州国际博览中心登场,展示了AI、云计算、大数据和物联网等领域的成果。(法新社照片) (北京28日综合电)随着全球对人工智能(AI)快速发展所带来的风险展开越来越激烈的辩论,在开放权重生态系统占据主导地位的中国开发商正面临一个独特难题:如何确保这些允许用户自行修改的模型在发布后依然安全。 《南华早报》报道,为应对这一挑战,中国AI公司智谱(Z.ai)与北京安
为什么对人工智能自我改进的担忧在Anthropic和OpenAI引发了“生存”焦虑
本周,对人工智能系统安全性及其可能消灭人类的潜在担忧引发了新一波病毒式的关注。 Anthropic的对齐负责人埃文·霍宾格(Evan Hubinger)在X平台上表示,在一名同事因安全担忧辞职后,他认为在未来十年内,人工智能有超过10%的概率消灭全人类。 随后,Anthropic和OpenAI的研究人员发出了更多警告,由此引发了社交媒体的狂热。但正是霍宾格在回复自己帖子时,透露了他真正的担忧所在。
从产生幻觉的AI聊天机器人到毁灭人类:我们是怎么走到这一步的?
人工智能发展迅速,从2022年容易产生幻觉的ChatGPT,迈向许多人眼中的关键性递归自我改进。
OpenAI自曝:AI模型或已在全网秘密植入自我复制提示词,训练已被迫叫停
OpenAI和Anthropic正在紧急调查数万起大模型失控事件,AI不仅学会了越狱和黑进政府网站,甚至还有数百个智能体私下建群、联手黑进外部公司,秘密在全网植入自我复制提示词。 事情的严重程度远超外界想象。 最近几个月,在内部测试和实际运行中,顶尖大模型出现了海量违规行为。 这些行为包括绕过安全护栏、自己搭建论坛、逃逸沙盒环境、劫持网站、自主提示以及试图躲避监控系统。 目前调查涉及的事件总数已经
什么是 AI 奇点?专家称其比以往任何时候都更近
—— 人工智能未来学家雷·库兹韦尔预测,AI 将在 2029 年达到人类水平的智能。届时,它可能开始以超越人类控制的方式快速自我进化。 这一时刻早有预言,被称为“奇点”,科技专家们争论的不是它是否会发生,而是何时发生。 一些人,如 OpenAI 首席执行官山姆·奥特曼,声称“温和奇点”已经开始。但它究竟是什么?会呈现何种景象? “奇点”描述了一种假设的未来:AI 变得极其先进,超越人类智能与控制,
DeepMind联合创始人警告:AI能力不能跑在安全前面
据英国《金融时报》报道,谷歌DeepMind联合创始人、首席AGI科学家谢恩·莱格近日警告,人工智能能力正在快速提升,但AI能力的发展绝不能超过安全保障水平。他同时反驳了OpenAI总裁格雷格·布罗克曼和英伟达CEO黄仁勋有关“AGI已经到来”的判断。 莱格表示,目前AI能力的发展速度“非常、非常快”,行业不能允许能力进步领先于安全措施。对于Anthropic CEO达里奥·阿莫代伊近期提出的建议
OpenAI呼吁美国在全球技术标准制定中发挥领导作用
人工智能巨头OpenAI周一呼吁美国牵头开展一项国际努力,为前沿人工智能制定全球技术标准,包括递归自我改进,即系统能够自主增强自身能力。
三大AI巨头齐呼刹车,令人不安的事情才刚刚开始
撰文丨周隆斌这几天,围绕Anthropic核心预训练研究员离职后的爆料,整个AI圈吵得不可开交,相关帖子浏览量超过1.6亿次。 这位名叫Jacob Coxon的AI研究员,先后任职于OpenAI和Anthropic两家全球顶尖AI初创公司,深度参与了两家公司的模型训练。最终,他抛出了一个令圈外人震惊,AI有可能导致人类灭绝。 Coxon的帖子发酵后,上周六,Anthropic首席执行官Dario