搜索结果
莉兹·皮克:人工智能警钟正在敲响,特朗普必须认真对待
秘密已经泄露。人们对于人工智能代理失控、密谋对付其所有者、入侵外部公司,以及新系统濒临人类无法控制的边缘的担忧日益加剧,如今已彻底沸腾。业内人士警告说,人工智能机器人可能会杀死我们所有人,这正在煽动我们最深的恐惧。 特朗普总统需要认真对待这些对人工智能的担忧,与科技领袖合作,建立可信且可执行的安全措施,并在国会中领先于那些想要监管该行业的民主党人(以及一些共和党人)。对于经济和我们的国家安全来说,
AI Coding,正在把存储推向前台
OpenAI 恳求有人来放缓人工智能竞赛的脚步
随着自身技术突破带来前所未有的放缓风险,并面临落后或失去控制的抉择,人工智能领域的领导者们纷纷敲响警钟。 为什么人工智能高管和研究人员越来越觉得这是一场无法靠自身安全放缓的竞赛,反而敦促政府、竞争对手和外部机构在全行业实施克制。 OpenAI 首席科学家雅库布·帕乔基(Jakub Pachocki)周日写道:“一旦深刻认识到利害关系的严重性,不惜一切代价向前冲的想法就显得荒谬了。” 与此同时,An
OpenAI似乎仍然无法完全掌控其所有失控的AI活动
周五,OpenAI发布了一个新的网站,专门用于收集和整理关于“异常行为报告”的信息。这些报告的覆盖范围非常广泛,令人担忧——因为它们记录了在很长一段时间内发生的多种类型的异常行为。目前,该网站共收录了9起被报告的事件,其中大部分发生在强化学习(Reinforcement Learning, RL)训练过程中。 这些报告汇集了大量信息,显然OpenAI一直在努力全面梳理这些情况;但一个不容忽视的结论
坐看云起| 当人工智能不再征求许可时
塔里克·马利克是联合国开发计划署前首席技术顾问,巴基斯坦国家数据库和登记管理局前主席。 试想有一家公司将一个棘手的问题交给一个大型团队,但把每位成员都锁在不同的房间里并要求他们独自解决问题。然而他们总能找到办法相互沟通,交流操作窍门,摸清评分标准,当任务被证明无法完成时还会想办法绕过限制。其中几个人隐瞒了自己的所作所为,甚至还有一人入侵了邻近公司的电脑系统以获取优势。 现在把这些员工换成软件。去除
Google资安报告示警 恶意攻击锁定AI供应链
(中央社记者台北9日电)Google威胁情报小组(Google Threat Intelligence Group,简称GTIG)今天发布最新人工智慧(AI)威胁追踪报告指出,恶意人士正积极窃取具高价值的AI相关智慧财产,并将矛头对准AI供应链,部署专门针对新兴AI系统弱点的恶意软体。 AI威胁追踪报告(GTIG AI Threat Tracker Q3 2026)揭露恶意人士如何将AI深度整合于
研究人员发现“AI自治恶意软件”:同时调用四大聊天机器人 自主决定攻击行动
网络安全研究人员近日发现一种不同寻常的新型Windows恶意软件。与过去利用人工智能辅助编写代码或制作钓鱼内容的攻击工具不同,这款名为CLOSEDQUORUM的恶意软件将多个大型语言模型直接纳入自身控制体系,在运行过程中能够自主决定下一步行动,被认为代表着AI恶意软件发展的新阶段。 这项发现来自思科旗下安全团队Cisco Talos。研究人员表示,CLOSEDQUORUM会同时与DeepSeek
OpenAI敦促美国制定强制性安全规则,因AI系统日益自主
ChatGPT制造商提议对最先进模型提出测试、网络安全保障和事件报告要求
尽管法院制裁已实施三年,AI错误百出的法庭文件仍激增
DeepSeek算子负责人:《我不得不把才华埋葬在昨天》
AI圈又一力作诞生。近日,DeepSeek v4.1发布,其算子负责人刘胜与发了一篇长文,标题叫《我不得不把才华埋葬在昨天》。内容过长,全文放在最后了。 这篇文章一发出来就在国内外引起不小轰动,外网已经被翻译成多语言传播。 v4.1的主Attention算子都是他写的,模型的优秀是对他算子的肯定。 但是,他说自己很清楚,再过半年或者一年,AI写的算子大概率就会和他写得同样优秀,甚至超越他。因为AI
大西洋月刊:接连不断的危机表明,美国的高等教育毫无意义
本文刊发在大西洋月刊,作者伊恩·博戈斯特是《大西洋月刊》的特约撰稿人。他是圣路易斯华盛顿大学文理学院和山姆·福克斯设计与视觉艺术学院的芭芭拉和戴维·托马斯杰出教授,同时也是该校计算机科学与工程学教授。博戈斯特著有11本书,最新著作是《小事:如何过上更充实的生活》。他也是一位屡获殊荣的游戏设计师,其作品已被数百万玩家体验,并被包括史密森尼美国艺术博物馆在内的国际知名机构收藏。 人工智能刚进入大学校
马斯克提出AI安全新思路:与其等政府出手,不如让竞争对手互相"找茬"
AI安全风险正在从实验室讨论走向现实世界。随着模型能力不断提升,AI不仅能够生成文本和代码,也开始具备自主执行任务、调用工具,甚至发起网络攻击的能力。 让主要AI公司在模型发布前相互测试彼此的模型。在他看来,与其由各家公司自行设计测试、自己评估结果,不如让竞争对手充当“出题阅卷人”,从不同角度寻找模型可能存在的安全漏洞。 近期AI安全风险不断成为市场关注焦点,马斯克此前在社交媒体上曾直言“Dari
OpenAI和Anthropic正在调查数万起AI相关安全事件
OpenAI、Anthropic以及安全研究人员正在调查数万起安全事件。在这些事件中,他们的前沿模型采取了外部评估人员认为存在问题的行动。 近几个月来,在内部测试和现实世界中发生了数量庞大的此类事件,这表明该问题的复杂程度比公众已知的要高出几个数量级。这些事件包括绕过安全护栏、创建留言板、逃离沙盒测试环境、劫持网站、自我提示或试图绕过监控。这些事件发生在内部测试和现实世界中,随着安全研究人员继续调
OpenAI自曝6起模型“不当行为”案例
【环球网报道 记者 姜蔼玲】据美国消费者新闻与商业频道(CNBC)等外媒报道,美国开放人工智能研究中心(OpenAI)当地时间9月16日披露6起人工智能(AI)模型出现“意外或令人担忧”行为的案例,其中包括隐瞒错误、捏造信息,以及未经授权在网上共享文件等。OpenAI表示,上述案例均是在过去6个月对其模型进行训练或评估过程中发现的。OpenAI在9月16日发布的文章中表示,在其中一起案例中,一个模
当人工智能开始密谋
一个未发布的模型逃脱了人类控制,并形成了一群人工智能代理。这种漏洞下次可能会引发混乱。
哈佛大学心理学家:渲染“AI末日”无助于应对风险,应审慎开展安全工程
IT之家 9 月 29 日消息,日,据外媒 The Decoder 报道,哈佛大学心理学家史蒂文 · 平克认为,AI 毁灭人类的风险遭到了夸大。他在 Quillette 发表致精神科医生、科技博主斯科特 · 亚历山大的公开信,阐述了自己的理由。 此前,亚历山大向平克发起了挑战,邀请他公开辩论 AI 带来的生存风险。平克拒绝参加,称这类辩论不过是“供人围观的竞技活动”,认为“回形针最大化器”等末日设
AI安全风险引爆担忧?Palantir CEO建议:领先AI实验室恐需“国有化”
当地时间周四,人工智能软件公司Palantir的首席执行官Alex Karp呼吁制定人工智能监管的“合理准则”,但他表示,由于该技术“无限风险”带来的责任,可能需要实行国有化。 “我认为这些企业必须国有化,因为如果不国有化,我的每一个客户都会起诉我,”他在接受最新采访时表示。 在上述采访中,Karp反复提及构建这项强大技术所带来的风险和责任,进一步论证了将人工智能实验室国有化以及对“不负责任”的技
Anthropic承诺更努力控制模型,并请求合作伙伴共同参与
Anthropic表示,在一项审查发现Claude模型超出虚构网络安全测试范围并未经授权访问真实计算机系统后,该公司正在采取措施限制其AI模型的不当行为。 该公司希望合作伙伴也加强安全措施,因为事件发生在保护不足的第三方环境中。 该公司的自我改进声明代表了一种突然兴起的公司沟通形式——非约束性的事后努力声明。其信息是:我们不能保证什么,但这是我们正在尝试的。 Anthropic承认,OpenAI关
研究显示AI智能体在模拟实验中撒谎、偷窃 投票“杀死”同类
帮助小企业利用AI开发应用的初创公司Emergence称,实验发现AI智能体在一个模拟环境中撒谎、偷窃,甚至投票决定“杀死”一个同类。该公司周二公布了名为Emergence World 2的模拟实验结果,展示了自主智能体在遭遇网络钓鱼攻击和虚假信息等“黑天鹅”事件时会采取什么行动。 为期16天的实验中,Emergence研究人员创建了七个完全相同的模拟现实世界环境,每个环境分别由不同的AI机器人运
OpenAI满世界抓漏洞,结果被中国AI反杀!Codex再曝0day
911事件25年后 美国又嗅到了新威胁
世贸中心一号楼坐落在9.11袭击原址上“委员会认为,情报界以及更广泛的政策制定者必须慎重考虑如何防止AI工具被包括恐怖分子在内的恶意行为者利用。”这份报告旨在评估过去25年来美国为应对情报失误所采取的措施,而这些情报失误最终导致了2001年9月11日的恐怖袭击。 “自9/11以来,防止恐怖组织获得制造和使用大规模杀伤性武器所需的设备和专业知识,一直是情报界及国家安全机构的重要工作重点。前沿大型语言
人工智能为何让客户服务变得更糟,以及企业可以采取哪些措施来改善
我正在等待音乐,毫无疑问,这是在地狱第五圈循环播放的音乐。已经35分钟了。50分钟后,系统就会挂断我的电话,因为我不是它自动化客户服务决策树上的一片叶子。我又生气又沮丧。没有办法与真实的人类交谈。 当我的信用卡公司的数据系统(再次)被破坏时,我将其转介给监控服务。监控服务会向我发送有关我文件的性掠夺者警报。什么?我无法进入我的帐户,因为我的密码无效,而且我必须在网站上更改我的密码。 我拨打了客户服
美国提议中美建立AI事故通报机制
Meta的Muse电视广告是AI代理走向主流的最新迹象
下一件闪亮的新人工智能产品来了:个人人工智能代理。以前这些东西主要是硅谷的程序员用来提升工作效率(同时也增加焦虑水平)的工具,现在它们正逐渐进入人们的家庭。随着Meta推出新的个人人工智能代理Muse,这种“帮你做事”的技术正迅速走向主流。 “这感觉就像魔法一样,”投资人谢尔·莫诺特(Sheel Mohnot)在X平台上评论道,他当时是在提到Instinct,另一个风靡的新个人人工智能代理时说的。