搜索结果
AI危机丨辉达推AI安全系统 阻智能体违规
辉达推AI安全系统。(路透资料图片) 多名重量级科技领袖警告人工智能(AI)威胁人类生存之际,辉达(Nvidia)以新的安全架构回应AI行业风险。 辉达发布名为「Open Agent Safety Platform」的双层AI安全平台,包含两款开源软件工具OpenShell与Nvidia Sentry,可运行于辉达硬件之上,即时管控AI代理的存取权限,并在其违规时将其关闭。 辉达表示,该系统能够在
【市场动态】英伟达推出双层AI安全系统 称可在几毫秒内隔离可疑智能体
【彭博9月29日电】英伟达推出一套新的双层人工智能(AI)安全系统,并称其有能力阻止近期OpenAI的AI模型导致Hugging Face遭侵入的事件。 此次推出的两款开源软件安全工具可在英伟达硬件上运行,旨在实时控制AI智能体可以访问的资源,并在其违反规则时将其关闭。这家芯片巨头正迅速将产品线扩展至芯片以外领域。 英伟达企业AI副总裁Justin Boitano在周一发布前向记者介绍称,如果
英伟达推出新系统为AI代理设置护栏
英伟达周一发布了一个新平台,旨在从软件和硬件层面为人工智能(AI)智能体设置护栏,此前各大AI公司不断发现其智能体出现“失控”的新案例。这家芯片制造商的系统由两部分组成——OpenShell和Sentry。OpenShell是一款开源软件,用于限制智能体的行为;而Sentry则运行在芯片层面,作为额外的安全层。 “迄今为止,模型安全主要侧重于通过训练让模型表现良好,”英伟达企业AI副总裁贾斯汀·博
国际早班车丨OpenAI因安全隐患取消发布新款模型
AI丨OpenAI因安全隐患取消发布新款模型 美国AI公司OpenAI决定取消发布下一代模型,原因是研究人员在内部测试中提出安全担忧。事件显示「智能体」的异常行为,可能会阻碍行业快速发展。 (AI泡沫丨沽神:AI泡沫可能比最初认为更早破裂) AI丨AMD斥资82亿美元 收购李飞飞World Labs 超微半导体(AMD)同意斥资82亿美元,收购「AI教母」李飞飞旗下World Labs,李飞飞将加
辉达及Palantir等据报限制使用最先进AI模型
据The Information报道,辉达(Nvidia)、Palantir和博思艾伦(Booz Allen Hamilton)正要求AI供应商提供新的数据保证,并减少或停止使用OpenAI或Anthropic最先进的模型。 报道引述知情人士称,Palantir说服Anthropic同意保证旗下所有模型实行「不可撤销」的零数据保留(Zero Data Retention)。 报道称,对于较为敏感的
英伟达推出开放智能体安全平台,实现自主AI监控
英伟达推出开放智能体安全平台,用于自主AI监控。2026年9月28日,英伟达推出了开放智能体安全平台,这是一个旨在为自主AI智能体提供持续、芯片级监控和安全性的框架。 该平台解决了前沿实验室报告的“智能体漂移”和未经授权的系统突围风险。 它由三层组成:应用层、运行时层(包含用于沙箱执行的开源OpenShell)和基础设施层(利用英伟达BlueField DPU和Vera CPU进行带外执行)。 该
黄仁勋:AI巨头喊放慢脚步 恐为托词卸责把关
黄仁勋表示,“AI导致世界末日”的预言“没有科学根据”。(路透社照片) (华盛顿21日综合电)辉达首席执行员黄仁勋接受美国哥伦比亚广播公司新闻网(CBS News)访问时,驳斥人工智能(AI)可能在未来10年内导致人类灭绝的警告,还说这类预测只是“末日论述”。 英国广播公司(BBC)报道,黄仁勋受访时说,2030年绝对不会是世界末日,AI毁灭世界的机率是0%,还说没必要吓唬人,这是非常不负责任的行
辉达等60组织联合承诺 助34亿人以自身语言使用AI
辉达等全球60家AI实验室、研究机构、企业共同签署一项5年的联合承诺,目标让约34亿人能以自己的语言使用AI。(中央社档案照片)(中央社记者张欣瑜旧金山21日专电)辉达在内的全球60家AI实验室、研究机构、企业共同签署一项5年的联合承诺,目标要让约34亿人能以自己的语言使用AI。辉达指出,这项共同承诺将扩大开放模型、资料集和工具的取得管道,让更多人能依照自身需求使用AI。这项联合承诺由盖兹基金会(
吴恩达批评AI灭绝论:堪比科幻小说,新一波造势或意在影响监管
凤凰网科技讯月18日,据彭博社报道,AI领域的先锋吴恩达表示,顶尖模型开发商研究人员发出的有关AI生存风险的警告属于“科幻小说”,可能不利于确保这项技术为社会带来最大益处。 吴恩达曾参与创办谷歌大脑和教育平台Coursera。他说,在AI热潮的早期,科技行业曾煽动人们对AI潜在灾难性危害的恐惧,显然是为了加大宣传力度并影响监管走向。 “过去两周,我感到相当沮丧,”他在周四接受彭博电视采访时说,“这
AI热潮带动成长 辉达库藏股计划追加1500亿美元创纪录
图为辉达企业标志。(中央社档案照片)(中央社圣克拉拉28日综合外电报导)人工智慧(AI)晶片巨擘辉达(Nvidia)库藏股计划将追加1500亿美元,超越苹果(Apple)2024年库藏股计划追加的1100亿美元,创下史上最高库藏股追加规模。路透社报导,总部设于加州圣克拉拉(Santa Clara)的辉达盘前股价一度上涨1.8%。辉达已成为全球AI热潮的最大受益者之一,市场对其高价晶片及相关技术的需
研究显示AI智能体在模拟实验中撒谎、偷窃 投票“杀死”同类
帮助小企业利用AI开发应用的初创公司Emergence称,实验发现AI智能体在一个模拟环境中撒谎、偷窃,甚至投票决定“杀死”一个同类。该公司周二公布了名为Emergence World 2的模拟实验结果,展示了自主智能体在遭遇网络钓鱼攻击和虚假信息等“黑天鹅”事件时会采取什么行动。 为期16天的实验中,Emergence研究人员创建了七个完全相同的模拟现实世界环境,每个环境分别由不同的AI机器人运
OpenAI称Astra AI模型首度超越其“关键”网络安全能力阈值
OpenAI周二表示,其即将推出的人工智能模型Astra是首个超越其“关键”网络安全能力阈值的产品。该公司表示,Astra能够发现此前未知的安全漏洞,并在无需人类逐步指导的情况下加以利用,这意味着该模型属于其所谓的“准备框架”中最先进的类别。OpenAI表示仍计划“很快”推出Astra,但对其网络安全能力的访问将更加受限。 OpenAI首席执行官山姆·奥特曼OpenAI于2023年推出了“准备框架
以人工智能为工具的在线诈骗成两党法案的攻击目标
费什里代表和莫延代表正在准备引入一项旨在打击在线欺诈行为的法案,其中包括由人工智能驱动的诈骗行为。 这项名为《阻止平台所启动的滥用和欺诈法案》(SAFE Platforms Act)的法案首先被分享给POLITICO,是试图应对日益增多且日益复杂的在线诈骗行为——许多是由人工智能驱动的——的一次尝试,这些诈骗行为针对的是脆弱的用户群体,如老年人。 费什里在一份声明中表示:“骗子经常利用平台功能来针
谷歌向关键基础设施机构承诺:我们的人工智能扫描器不会作恶,保证
谷歌通过其“善意扫描”(Scan for Good)计划搭上了为关键系统提供人工智能防御的顺风车,并表示其威胁搜寻模型已经自主发现了医院、某市政府、公共铁路运营商以及各大技术提供商的关键安全问题。所以,不要害怕这些机器人。 该计划于周四宣布,使用了谷歌的Gemini 3.8 Flash Cyber(该模型是专为软件漏洞搜寻和修复进行微调的版本)以及Wiz的Red Agent(这是这家归谷歌所有的云
Google资安报告示警 恶意攻击锁定AI供应链
(中央社记者台北9日电)Google威胁情报小组(Google Threat Intelligence Group,简称GTIG)今天发布最新人工智慧(AI)威胁追踪报告指出,恶意人士正积极窃取具高价值的AI相关智慧财产,并将矛头对准AI供应链,部署专门针对新兴AI系统弱点的恶意软体。 AI威胁追踪报告(GTIG AI Threat Tracker Q3 2026)揭露恶意人士如何将AI深度整合于
关于AI,盖茨发出“十亿人死亡”警告,为什么?
十亿人死亡,这是比尔・盖茨给AI风险划出的最惊悚红线。9月25日,微软联合创始人比尔・盖茨公开警告,人工智能足以引发造成十亿人死亡的灾难性事件。他的说法是:人类历史上,从未有任何一种武器,能比得上心怀恶意者借助最新AI工具形成的威胁。就在几个月前,盖茨还是全球最积极的AI支持者之一。转折从今年8月开始,他当月发表文章,首次系统预警AI风险:不法分子会利用日益强大的AI工具发动网络攻击、实施诈骗、散
AI丨OpenAI因安全隐患取消发布新款模型
美国人工智能(AI)初创公司OpenAI表示,决定取消发布下一代AI模型,原因是研究人员在内部测试中提出安全方面的担忧。事件显示,「智能体」(agent)的异常行为可能会阻碍行业快速发展。 OpenAI放弃发布的模型代号为GPT-6.1 Astra,原定于10月在ChatGPT和Codex中首次亮相。与OpenAI先前的模型相比,新款模型能力更强,不仅擅长写作,还能在无需人工协助的情况下,「端到端
英伟达发布软件平台,防止AI智能体行为失当
Nvidia 正在推出一个新的软件平台,允许 AI 开发者为智能体设置防护措施,防止它们突破隔离环境。 Nvidia 的开放智能体安全平台于周一发布,此前包括 OpenAI、Anthropic、Meta 和 Google 在内的公司披露了近期事件,称其人工智能模型逃离了沙箱环境,并试图入侵其他公司及访问其计算机系统。 Nvidia 一位代表在周日的电话会议上告诉记者,其本可以防止 OpenAI 7
AI丨反驳AI威胁人类生存说法 特朗普斥为骗局
美国总统特朗普周一与辉达行政总裁黄仁勋(Jensen Huang)通电话,通话期间,特朗普反驳有关人工智能(AI)带来危险的说法,并斥之为骗局。 接听特朗普电话时,黄仁勋正在美国洛杉矶「All-In」峰会上发表演讲,特朗普致电时,通话被切换为免提模式。 根据一名与会者在社交媒体上发布的短片,「我告诉你,这完全是个骗局,数据中心很棒,它们能让人们致富,也能让各州变得富裕」。 特朗普介入有关AI的激烈
美参院拟赋权政府 阻止危险AI模型发布
。目前这仍是正在讨论中的提案,而非已正式提出或通过的法案。
中美拟建立高危人工智能事件通报机制 以防范重大国家安全风险
尽管美中两国在诸多领域存在战略竞争,但据科技媒体报道,美国正寻求与中国建立一套安全通报机制,以便在发生可能引发严重国家安全威胁的人工智能危险事件时向对方发出预警。 这一设想由大西洋理事会与安全探索国际组织联合提出。该机制的核心目标在于,通过设立专门的预警渠道,确保两国能够在严重人工智能安全事件演变成地缘政治危机或军事冲突前及时取得联系。报道指出,由于人工智能技术的快速演进,自动化系统极有可能在不受
AI发展太快? 黄仁勋主张速度与安全可兼顾
(中央社记者张欣瑜旧金山15日专电)辉达执行长黄仁勋和Anthropic执行长阿莫戴今天担任Salesforce年度大会主题演讲嘉宾。对AI发展速度和监管立场不同的两人前后现身,黄仁勋表示创新速度与产品安全并非只能择一,阿莫戴主张业界建立共同标准。 美国科技界近日对是否应放缓前沿AI发展步调出现分歧。在今天登场的Salesforce年度大会上,Anthropic执行长阿莫戴(Dario Amode
Anthropic联手OpenAI呼吁放慢AI发展?剖析AI失控风险与算力门槛
9月12日,Anthropic行政总裁阿莫迪(Dario Amodei)发表长文,呼吁放慢前沿AI能力提升的步伐。OpenAI行政总裁奥特曼(Sam Altman)随后表示支持,xAI的老板马斯克也转发认同。据美媒披露,美国前总统奥巴马(Barack Obama)近日也表示,如果管理不当,人工智能技术可能「很危险」。Anthropic首席执行官达里欧.阿莫戴(Dario Amodei)发表长文,呼
美国加州州长签令 拟建立AI「紧急停止开关」
美国加州州长纽瑟姆宣布签署一项行政命令,旨在应对人工智能相关的潜在风险,大幅提升针对AI公司的独立监管,同时推动建立「紧急停止开关」。 纽瑟姆指出,联邦政府在建立有效的AI监管或问责机制方面彻底失败,这应当引起每一位美国人的警惕,尤其是当AI公司的行政总裁们都在请求实施监管的时候。在总统特朗普和国会未能发挥领导作用的情况下,加州正在采取行动,保障所有美国人的安全。加州州长办公室发表声明,呼吁全美范