字号 ·· | 护眼

搜索结果

「AI危机丨辉达推AI安全系统 阻智能体违规」共 92 条 · 第 1 页
信报财经

AI危机丨辉达推AI安全系统 阻智能体违规

辉达推AI安全系统。(路透资料图片) 多名重量级科技领袖警告人工智能(AI)威胁人类生存之际,辉达(Nvidia)以新的安全架构回应AI行业风险。 辉达发布名为「Open Agent Safety Platform」的双层AI安全平台,包含两款开源软件工具OpenShell与Nvidia Sentry,可运行于辉达硬件之上,即时管控AI代理的存取权限,并在其违规时将其关闭。 辉达表示,该系统能够在

09/28
中央通讯社

辉达推安全工具双重防护 数毫秒内隔离越界AI代理

辉达推出一套防止自主AI程式偏离既定指令的系统,称能在数毫秒内隔离试图越界的AI代理。(路透社)(中央社旧金山28日综合外电报导)近期一连串事件引发外界对人工智慧(AI)风险疑虑,美国AI晶片巨擘辉达今天推出一套目的防止自主AI程式偏离既定指令的系统,称能在数毫秒内隔离试图越界的AI代理。综合法新社、路透社及美国新闻网站Axios报导,AI代理(AI agent)设计目的是能自主执行任务,例如浏览

11小时前
财新

【市场动态】英伟达推出双层AI安全系统 称可在几毫秒内隔离可疑智能体

【彭博9月29日电】英伟达推出一套新的双层人工智能(AI)安全系统,并称其有能力阻止近期OpenAI的AI模型导致Hugging Face遭侵入的事件。  此次推出的两款开源软件安全工具可在英伟达硬件上运行,旨在实时控制AI智能体可以访问的资源,并在其违反规则时将其关闭。这家芯片巨头正迅速将产品线扩展至芯片以外领域。  英伟达企业AI副总裁Justin Boitano在周一发布前向记者介绍称,如果

11小时前 全文见 信报财经
国会山报

英伟达推出新系统为AI代理设置护栏

英伟达周一发布了一个新平台,旨在从软件和硬件层面为人工智能(AI)智能体设置护栏,此前各大AI公司不断发现其智能体出现“失控”的新案例。这家芯片制造商的系统由两部分组成——OpenShell和Sentry。OpenShell是一款开源软件,用于限制智能体的行为;而Sentry则运行在芯片层面,作为额外的安全层。 “迄今为止,模型安全主要侧重于通过训练让模型表现良好,”英伟达企业AI副总裁贾斯汀·博

09/28 全文见 美国消费者新闻与商业频道
星洲日报

教宗罕见公开批评黄仁勋淡化AI失控风险

教宗良十四世周一在返回罗马的专机上对记者表示,他质疑辉达CEO黄仁勋对AI监管的立场,并呼吁全球透过对话、研究与调查建立安全防护,寻找方法确保AI不会发展到可能毁灭人类的地步。(法新社照片) (教宗专机29日综合电)美国人工智能(AI)晶片巨头辉达周一宣布推出一款新的安全工具“开放代理安全平台”,号称能替AI代理画下权限界线,一旦侦测到AI试图执行超出授权范围的行动,最快可在数毫秒内将其隔离。对此

6小时前
凤凰网科技

AI越来越会“越狱”后,英伟达开始卖“笼子”了

凤凰网科技讯月29日,当AI Agent开始能够自己操作电脑、调用工具、访问网络甚至执行长达数小时的任务,一个新的问题也越来越现实:如果AI不按照预想的方式行动,该怎么把它关住?英伟达给出的答案是,在AI外面再加一道“笼子”。 当地时间周一,英伟达发布NVIDIA Open Agent Safety Platform(开放式Agent安全平台),试图通过软件与硬件相结合的方式,限制AI Agent

9小时前
信报财经

国际早班车丨OpenAI因安全隐患取消发布新款模型

AI丨OpenAI因安全隐患取消发布新款模型 美国AI公司OpenAI决定取消发布下一代模型,原因是研究人员在内部测试中提出安全担忧。事件显示「智能体」的异常行为,可能会阻碍行业快速发展。 (AI泡沫丨沽神:AI泡沫可能比最初认为更早破裂) AI丨AMD斥资82亿美元 收购李飞飞World Labs 超微半导体(AMD)同意斥资82亿美元,收购「AI教母」李飞飞旗下World Labs,李飞飞将加

13小时前
信报财经

辉达及Palantir等据报限制使用最先进AI模型

据The Information报道,辉达(Nvidia)、Palantir和博思艾伦(Booz Allen Hamilton)正要求AI供应商提供新的数据保证,并减少或停止使用OpenAI或Anthropic最先进的模型。 报道引述知情人士称,Palantir说服Anthropic同意保证旗下所有模型实行「不可撤销」的零数据保留(Zero Data Retention)。 报道称,对于较为敏感的

09/14 全文见 华尔街见闻
罗塞塔简报

英伟达推出开放智能体安全平台,实现自主AI监控

英伟达推出开放智能体安全平台,用于自主AI监控。2026年9月28日,英伟达推出了开放智能体安全平台,这是一个旨在为自主AI智能体提供持续、芯片级监控和安全性的框架。 该平台解决了前沿实验室报告的“智能体漂移”和未经授权的系统突围风险。 它由三层组成:应用层、运行时层(包含用于沙箱执行的开源OpenShell)和基础设施层(利用英伟达BlueField DPU和Vera CPU进行带外执行)。 该

09/28
星洲日报

黄仁勋:AI巨头喊放慢脚步 恐为托词卸责把关

黄仁勋表示,“AI导致世界末日”的预言“没有科学根据”。(路透社照片) (华盛顿21日综合电)辉达首席执行员黄仁勋接受美国哥伦比亚广播公司新闻网(CBS News)访问时,驳斥人工智能(AI)可能在未来10年内导致人类灭绝的警告,还说这类预测只是“末日论述”。 英国广播公司(BBC)报道,黄仁勋受访时说,2030年绝对不会是世界末日,AI毁灭世界的机率是0%,还说没必要吓唬人,这是非常不负责任的行

09/21
中央通讯社

辉达等60组织联合承诺 助34亿人以自身语言使用AI

辉达等全球60家AI实验室、研究机构、企业共同签署一项5年的联合承诺,目标让约34亿人能以自己的语言使用AI。(中央社档案照片)(中央社记者张欣瑜旧金山21日专电)辉达在内的全球60家AI实验室、研究机构、企业共同签署一项5年的联合承诺,目标要让约34亿人能以自己的语言使用AI。辉达指出,这项共同承诺将扩大开放模型、资料集和工具的取得管道,让更多人能依照自身需求使用AI。这项联合承诺由盖兹基金会(

09/22
凤凰网科技

吴恩达批评AI灭绝论:堪比科幻小说,新一波造势或意在影响监管

凤凰网科技讯月18日,据彭博社报道,AI领域的先锋吴恩达表示,顶尖模型开发商研究人员发出的有关AI生存风险的警告属于“科幻小说”,可能不利于确保这项技术为社会带来最大益处。 吴恩达曾参与创办谷歌大脑和教育平台Coursera。他说,在AI热潮的早期,科技行业曾煽动人们对AI潜在灾难性危害的恐惧,显然是为了加大宣传力度并影响监管走向。 “过去两周,我感到相当沮丧,”他在周四接受彭博电视采访时说,“这

09/18
中央通讯社

AI热潮带动成长 辉达库藏股计划追加1500亿美元创纪录

图为辉达企业标志。(中央社档案照片)(中央社圣克拉拉28日综合外电报导)人工智慧(AI)晶片巨擘辉达(Nvidia)库藏股计划将追加1500亿美元,超越苹果(Apple)2024年库藏股计划追加的1100亿美元,创下史上最高库藏股追加规模。路透社报导,总部设于加州圣克拉拉(Santa Clara)的辉达盘前股价一度上涨1.8%。辉达已成为全球AI热潮的最大受益者之一,市场对其高价晶片及相关技术的需

09/28
cnbeta

研究显示AI智能体在模拟实验中撒谎、偷窃 投票“杀死”同类

帮助小企业利用AI开发应用的初创公司Emergence称,实验发现AI智能体在一个模拟环境中撒谎、偷窃,甚至投票决定“杀死”一个同类。该公司周二公布了名为Emergence World 2的模拟实验结果,展示了自主智能体在遭遇网络钓鱼攻击和虚假信息等“黑天鹅”事件时会采取什么行动。 为期16天的实验中,Emergence研究人员创建了七个完全相同的模拟现实世界环境,每个环境分别由不同的AI机器人运

09/16
cnbeta

OpenAI称Astra AI模型首度超越其“关键”网络安全能力阈值

OpenAI周二表示,其即将推出的人工智能模型Astra是首个超越其“关键”网络安全能力阈值的产品。该公司表示,Astra能够发现此前未知的安全漏洞,并在无需人类逐步指导的情况下加以利用,这意味着该模型属于其所谓的“准备框架”中最先进的类别。OpenAI表示仍计划“很快”推出Astra,但对其网络安全能力的访问将更加受限。 OpenAI首席执行官山姆·奥特曼OpenAI于2023年推出了“准备框架

09/02
政治报

以人工智能为工具的在线诈骗成两党法案的攻击目标

费什里代表和莫延代表正在准备引入一项旨在打击在线欺诈行为的法案,其中包括由人工智能驱动的诈骗行为。 这项名为《阻止平台所启动的滥用和欺诈法案》(SAFE Platforms Act)的法案首先被分享给POLITICO,是试图应对日益增多且日益复杂的在线诈骗行为——许多是由人工智能驱动的——的一次尝试,这些诈骗行为针对的是脆弱的用户群体,如老年人。 费什里在一份声明中表示:“骗子经常利用平台功能来针

09/21
theregister

谷歌向关键基础设施机构承诺:我们的人工智能扫描器不会作恶,保证

谷歌通过其“善意扫描”(Scan for Good)计划搭上了为关键系统提供人工智能防御的顺风车,并表示其威胁搜寻模型已经自主发现了医院、某市政府、公共铁路运营商以及各大技术提供商的关键安全问题。所以,不要害怕这些机器人。 该计划于周四宣布,使用了谷歌的Gemini 3.8 Flash Cyber(该模型是专为软件漏洞搜寻和修复进行微调的版本)以及Wiz的Red Agent(这是这家归谷歌所有的云

09/24
中央通讯社

Google资安报告示警 恶意攻击锁定AI供应链

(中央社记者台北9日电)Google威胁情报小组(Google Threat Intelligence Group,简称GTIG)今天发布最新人工智慧(AI)威胁追踪报告指出,恶意人士正积极窃取具高价值的AI相关智慧财产,并将矛头对准AI供应链,部署专门针对新兴AI系统弱点的恶意软体。 AI威胁追踪报告(GTIG AI Threat Tracker Q3 2026)揭露恶意人士如何将AI深度整合于

09/09
凤凰网

关于AI,盖茨发出“十亿人死亡”警告,为什么?

十亿人死亡,这是比尔・盖茨给AI风险划出的最惊悚红线。9月25日,微软联合创始人比尔・盖茨公开警告,人工智能足以引发造成十亿人死亡的灾难性事件。他的说法是:人类历史上,从未有任何一种武器,能比得上心怀恶意者借助最新AI工具形成的威胁。就在几个月前,盖茨还是全球最积极的AI支持者之一。转折从今年8月开始,他当月发表文章,首次系统预警AI风险:不法分子会利用日益强大的AI工具发动网络攻击、实施诈骗、散

23小时前
信报财经

AI丨OpenAI因安全隐患取消发布新款模型

美国人工智能(AI)初创公司OpenAI表示,决定取消发布下一代AI模型,原因是研究人员在内部测试中提出安全方面的担忧。事件显示,「智能体」(agent)的异常行为可能会阻碍行业快速发展。 OpenAI放弃发布的模型代号为GPT-6.1 Astra,原定于10月在ChatGPT和Codex中首次亮相。与OpenAI先前的模型相比,新款模型能力更强,不仅擅长写作,还能在无需人工协助的情况下,「端到端

14小时前
美国消费者新闻与商业频道

英伟达发布软件平台,防止AI智能体行为失当

Nvidia 正在推出一个新的软件平台,允许 AI 开发者为智能体设置防护措施,防止它们突破隔离环境。 Nvidia 的开放智能体安全平台于周一发布,此前包括 OpenAI、Anthropic、Meta 和 Google 在内的公司披露了近期事件,称其人工智能模型逃离了沙箱环境,并试图入侵其他公司及访问其计算机系统。 Nvidia 一位代表在周日的电话会议上告诉记者,其本可以防止 OpenAI 7

09/28
信报财经

AI丨反驳AI威胁人类生存说法 特朗普斥为骗局

美国总统特朗普周一与辉达行政总裁黄仁勋(Jensen Huang)通电话,通话期间,特朗普反驳有关人工智能(AI)带来危险的说法,并斥之为骗局。 接听特朗普电话时,黄仁勋正在美国洛杉矶「All-In」峰会上发表演讲,特朗普致电时,通话被切换为免提模式。 根据一名与会者在社交媒体上发布的短片,「我告诉你,这完全是个骗局,数据中心很棒,它们能让人们致富,也能让各州变得富裕」。 特朗普介入有关AI的激烈

09/15
大纪元

美参院拟赋权政府 阻止危险AI模型发布

。目前这仍是正在讨论中的提案,而非已正式提出或通过的法案。

09/12
cnbeta

中美拟建立高危人工智能事件通报机制 以防范重大国家安全风险

尽管美中两国在诸多领域存在战略竞争,但据科技媒体报道,美国正寻求与中国建立一套安全通报机制,以便在发生可能引发严重国家安全威胁的人工智能危险事件时向对方发出预警。 这一设想由大西洋理事会与安全探索国际组织联合提出。该机制的核心目标在于,通过设立专门的预警渠道,确保两国能够在严重人工智能安全事件演变成地缘政治危机或军事冲突前及时取得联系。报道指出,由于人工智能技术的快速演进,自动化系统极有可能在不受

09/21
上一页 第 1 页 下一页
1CCF | 全球资讯
正在加载…