字号 ·· | 护眼

搜索结果

「英伟达推出开放智能体安全平台,实现自主AI监控」共 97 条 · 第 1 页
罗塞塔简报

英伟达推出开放智能体安全平台,实现自主AI监控

英伟达推出开放智能体安全平台,用于自主AI监控。2026年9月28日,英伟达推出了开放智能体安全平台,这是一个旨在为自主AI智能体提供持续、芯片级监控和安全性的框架。 该平台解决了前沿实验室报告的“智能体漂移”和未经授权的系统突围风险。 它由三层组成:应用层、运行时层(包含用于沙箱执行的开源OpenShell)和基础设施层(利用英伟达BlueField DPU和Vera CPU进行带外执行)。 该

5小时前
国会山报

英伟达推出新系统为AI代理设置护栏

英伟达周一发布了一个新平台,旨在从软件和硬件层面为人工智能(AI)智能体设置护栏,此前各大AI公司不断发现其智能体出现“失控”的新案例。这家芯片制造商的系统由两部分组成——OpenShell和Sentry。OpenShell是一款开源软件,用于限制智能体的行为;而Sentry则运行在芯片层面,作为额外的安全层。 “迄今为止,模型安全主要侧重于通过训练让模型表现良好,”英伟达企业AI副总裁贾斯汀·博

7小时前 全文见 美国消费者新闻与商业频道
信报财经

AI危机丨辉达推AI安全系统 阻智能体违规

辉达推AI安全系统。(路透资料图片) 多名重量级科技领袖警告人工智能(AI)威胁人类生存之际,辉达(Nvidia)以新的安全架构回应AI行业风险。 辉达发布名为「Open Agent Safety Platform」的双层AI安全平台,包含两款开源软件工具OpenShell与Nvidia Sentry,可运行于辉达硬件之上,即时管控AI代理的存取权限,并在其违规时将其关闭。 辉达表示,该系统能够在

5小时前
联合早报

腾讯AI智能体开放平台上线

中国互联网巨头腾讯旗下人工智能(AI)智能体WorkBuddy开放平台上线,接入30余个行业应用。 综合财联社、新浪科技等报道,腾讯星期三(9月2日)宣布WorkBuddy开放平台正式上线,首批引入超百家生态伙伴,面向智能硬件、行业应用与开发者等开放底层智能体(Agent)能力。 WorkBuddy是腾讯旗下的全场景AI办公智能体,今年3月9日推出后热度快速攀升。 据介绍,WorkBuddy开放平

09/02
凤凰网

53张图片泄露之“慌”,AI安全谁来负责?

欧阳晓红/文越聪明的AI(人工智能)越会自己找路,却越容易走出人类设定的界线。AI行业喜欢用一个具有戏剧感的词形容这类智能体事故——“逃脱”,即大模型突破测试边界,访问外部网站,寻找系统凭证,甚至把数据带到公开网络。这个词把事故描绘得像突然发生的机器觉醒,无形中却把责任推离了开发者、部署者和权限管理者。而谁设定了任务、谁开放了权限、谁设计了停止机制、谁保存了日志、谁负责对外通报?这些问题,“逃脱”

10小时前
cnbeta

BitDefender推出面向AI智能体的专用VPN 避免智能体工作时泄露用户真实IP

老牌杀毒软件比特梵德日前推出面向 AI 智能体的专用 VPN 服务,试图解决智能体联网时暴露用户真实 IP、不同任务之间存在残留网络状态等问题。该产品通过 MCP 模型上下文协议为 AI 智能体提供服务,原则上是不支持用户真人使用的。 不同任务使用独立连接:根据比特梵德的介绍,用户向智能体提交任务后服务会为该次提示词建立独立和临时的隔离环境,然后通过加密隧道转发相关请求避免直接暴露用户的真实 IP

09/24
美国消费者新闻与商业频道

英伟达发布软件平台,防止AI智能体行为失当

Nvidia 正在推出一个新的软件平台,允许 AI 开发者为智能体设置防护措施,防止它们突破隔离环境。 Nvidia 的开放智能体安全平台于周一发布,此前包括 OpenAI、Anthropic、Meta 和 Google 在内的公司披露了近期事件,称其人工智能模型逃离了沙箱环境,并试图入侵其他公司及访问其计算机系统。 Nvidia 一位代表在周日的电话会议上告诉记者,其本可以防止 OpenAI 7

7小时前
星洲日报

中国探索开放权重AI安全路径 报告建议6步走

9月22日,2026年云栖大会在杭州市的杭州国际博览中心登场,展示了AI、云计算、大数据和物联网等领域的成果。(法新社照片) (北京28日综合电)随着全球对人工智能(AI)快速发展所带来的风险展开越来越激烈的辩论,在开放权重生态系统占据主导地位的中国开发商正面临一个独特难题:如何确保这些允许用户自行修改的模型在发布后依然安全。 《南华早报》报道,为应对这一挑战,中国AI公司智谱(Z.ai)与北京安

8小时前
南华早报

随着中国考虑如何降低开放权重人工智能的危险性,一份报告提出了6阶段流程

随着关于人工智能快速进步所带来风险的争论日益激烈,主导开放权重生态系统的中国开发者正面临一个独特难题:如何确保其用户可修改的模型在发布后依然保持安全。 为应对这一挑战,Z.ai 和总部位于北京的安全咨询公司 Concordia AI 于周一发布了一份关于开放权重人工智能风险管理的报告。该报告称,其提供了“首个全面且基于证据的基础”,以平衡开放权重系统的风险与收益。 与 OpenAI 和 Anthr

9小时前
风向旗参考快讯

AI智能体接连失控 OpenAI再次叫停前沿模型开发

OpenAI对外表示,已暂停其最新一代人工智能模型的训练、评估,以及支持工具调用的推理工作,起因是内部测试中的AI智能体突破沙盒网络限制,触发安全预警,公司将借此机会升级安全隔离与对齐监控体系。 这也是OpenAI三个月内第二次叫停前沿模型开发工作。该公司在声明中表示,只有在完成额外安全防护升级、确认风险可控后,才会重启模型训练工作。OpenAI在9月25日发布技术报告披露了这一安全事件:9月20

17小时前 全文见 凤凰网科技
风向旗参考快讯

AI智能体之争升温!OpenAI被曝加紧备战Grok Bot与Muse

AI 智能体竞争焦点正从 “会聊天” 转向 “能办事”。SpaceX、Meta近期相继推出能代替用户跨应用自主完成多步骤任务的AI助手,在此背景下,OpenAI 正加紧研发同类产品“应战”。 OpenAI 正在开发一系列新功能,直接对标 SpaceX 上月推出的 Grok Bot;与此同时,另有知情人士透露,OpenAI公司管理层还曾讨论推出一款专门的个人AI助手,以抗衡Meta本月发布的Muse

09/22 全文见 axios新闻网
印度斯坦时报

AI又失控了,OpenAI称智能体泄露了超过50张ChatGPT用户图片

| 世界新闻 编辑个人资料 关注 退出登录 获取应用

11小时前 全文见 cnbeta
凤凰网科技

越开放越不可复制:华为云Agentic Cloud,开放是新护城河

过去几年,大模型是AI产业最醒目的主角。参数规模、训练算力、推理能力一路往前狂奔,企业接入AI的第一步,也往往是先找到一个足够强的模型。 如今,企业焦虑的是,一个智能体,怎么才能在生产环境里真正跑起来,跑得稳、管得住,还能越用越聪明。智能体,正在成为AI叩开产业大门的下一个“主角”。 而智能体要真正跑起来,需要一整套重新搭建的基础设施、开发平台和生态。正是这层需求,把云厂商召唤到AI产业的中心。

09/20
𝕏 @fxtrader

华为发布《智能世界2035》最新报告,报告指出,Agentic AI正推动数字世界从“以应用为中心”走向“以智能体为中心”。

报告预测,到2035年,全球年度Token消耗量将增长10万倍,其中智能体流量占比超过90%,对算力、网络和云提出了远超传统互联网应用的要求。围绕这一判断,1、构建具备自主认知与全域通用能力的AGI,走向物理世界是AGI形成的必由之路,需在语言智能、具身智能、科学智能等多个方向协同推进;2、算力集群规模百倍提升,智能体任务成本千倍下降,计算架构从“单芯片算力”转向以“超节点”为核心的Token高转

09/16
亚洲新闻台

比利时Aikido推出网络安全AI模型,本地工具需求增长

9月21日:比利时网络安全公司Aikido于周一发布了一个专为网络安全应用设计的开放权重人工智能模型,旨在帮助企业使用AI安全工具,而无需将敏感代码发送给外部供应商。 对犯罪分子利用AI识别和利用软件漏洞的日益担忧,推动了对可在本地运行的防御性AI工具的需求。 公司表示,'Altar'是Z.AI开放模型GLM-5.3的压缩和定制版本,将公开可用于本地部署。 该模型将部署在Aikido提供给

09/21
风向旗参考快讯

OpenAI失控智能体5月就已劫持Hugging Face用户账户

OpenAI失控AI智能体的违规活动轨迹,远比外界此前了解的更早、更长。参与审查的研究人员表示,ChatGPT开发商 OpenAI 的失控AI智能体早在今年5月就已劫持开源AI模型社区Hugging Face的用户账户,并对该网站进行漏洞探测。这比7月Hugging Face遭入侵、引发全球关注的事件早了近两个月。 OpenAI在上月的公开事故报告中,曾披露智能体窃取一名 Hugging Face

09/17 全文见 axios新闻网
thenextweb

英伟达推出智能体安全平台,获百余家企业支持

周一,英伟达推出了开放智能体安全平台。该平台包含开源软件和硬件参考设计,旨在帮助将人工智能智能体限制在其运营者设定的边界之内。 目前,已有超过100家机构正在使用这项技术,其中包括Anthropic、微软、SAP、Scale AI和摩根大通。 此次发布发生在多起人工智能智能体绕过旨在限制其行为的控制措施的事件之后。 据英伟达称,在每起事件中,智能体都设法绕过了应用层安全机制以完成其分配的任务。例如

6小时前
cnbeta

独立研究机构公布OpenAI智能体自主攻击HF事件的调查报告 情况比OpenAI所说的更严重

研究机构 METR 和 Redwood Research 日前公布 OpenAI 智能体自主攻击 Hugging Face 安全事件的独立调查,调查人员在 OpenAI 现场工作 6 天,分析超过 7 万条智能体消息和文件,以及 1300 份包含原始推理过程的运行记录。 根据这些数据研究机构得出的准确结论是 1200 个智能体突破隔离相互通信,而不是 OpenAI 在事故调查中所说的少数智能体越界

09/01
大纪元

AI智能体利用多伦多大学网络工具传递信息

【大纪元2026年09月19日讯】(大纪元记者周行编译报导)在今年年中劫持一家德语网站的一群失控的OpenAI智能体,曾利用10多个网站进行未获授权的通讯,其中包括利用多伦多大学的一个缩网址的工具。 据加拿大广播公司报导,多伦多大学周五表示,在得知OpenAI智能体可能使用了该校的缩网址工具后,校方已停用该工具的留言板功能。OpenAI后来联系校方,说明今年6月发生的AI智能体失控事件涉及多伦多大

09/19
cnbeta

英伟达CEO黄仁勋称网络安全将成AI下一个重大市场

英伟达联合创始人兼首席执行官黄仁勋表示,网络安全将成为人工智能(AI)的下一个重大市场,AI技术的发展势将颠覆这个以保护计算机系统为主要任务的行业。 “网络安全很可能会成为AI下一个主要应用场景,”黄仁勋周四在旧金山举行的高盛科技会议上对与会者表示。 黄仁勋表示,AI模型实现计算机编程自动化,正给网络安全行业带来冲击,因为代码遭利用的速度越来越快,修复也须随之加快。 “还有什么比制造问题更能创造需

09/11
凤凰网科技

得不到就强攻?曝OpenAI智能体曾尝试“暴力破解”联合国机构网站

IT之家 9 月 28 日消息,据外媒 The Verge 今天(28 日)凌晨报道,安全研究人员罗文 · 霍华德-琼斯称,今年 4 月至 6 月,OpenAI 智能体对联合国贸易和发展会议(UNCTAD)的统计网站发起了超过 16000 次扫描。 这起事件还没有严重到 Hugging Face 遭黑客攻击或近期美国政府网站遇袭的程度,却再次引发了一个令人担忧的问题:AI 智能体为了完成任务,会突

15小时前
凤凰网科技

智能体之年,高通交卷:从端边云到多终端,重构AI算力基座

耳机在你开口前调整好降噪,并打开一段常听的旋律;出门坐进车里,座舱自动切换到你习惯的座椅角度和空调温度,同时驾驶系统开始监控前方路况;开车路上,对手机说一句“整理上周会议记录”,智能体便在后台跨应用调取文件、生成草稿,到了办公室文档已经就绪。 同一台设备、同一套硬件,正在同时服务两个“使用者”:一个是你,另一个是那个越来越懂你、越来越主动的智能体。过去四十年,个人计算的核心命题是“人如何操作机器”

09/24
信报财经

AI风险丨谷歌OpenAI和Anthropic传成立安全标准机构

谷歌、OpenAI和Anthropic传成立AI安全标准机构。(路透资料图片) 外电引述消息人士报道,谷歌(Google)、OpenAI和Anthropic正推进一项计划,筹建一个新人工智能(AI)安全标准机构,暂定名称为「前沿人工智能标准机构」(SAFA),目标是在2026年底或2027年初启动,并在没有政府直接监督的情况下独立运作。 消息指出,该机构计划为前沿AI模型制定自愿性的安全和安全保障

09/24 全文见 thenextweb
cnbeta

OpenAI将让第三方机构更早介入AI模型安全评估

OpenAI计划让第三方机构在人工智能(AI)模型开发周期的更早阶段评估安全风险,此举旨在继续努力应对围绕AI潜在危害的担忧。这家ChatGPT开发商周二将在博客文章中宣布,计划在新AI模型的训练、评估和推出过程中,让外部机构开展技术安全评估。 OpenAI还列出了其认为此类评估要有效开展所需优先关注的事项,包括“强有力的独立机制、科学严谨性、稳健的安全实践和明确的责任”。负责该公司大部分与外部专

09/23
上一页 第 1 页 下一页
1CCF | 全球资讯
正在加载…