字号 ·· | 护眼

搜索结果

「AI危机丨辉达推AI安全系统 阻智能体违规」共 92 条 · 第 2 页
香港01

Anthropic联手OpenAI呼吁放慢AI发展?剖析AI失控风险与算力门槛

9月12日,Anthropic行政总裁阿莫迪(Dario Amodei)发表长文,呼吁放慢前沿AI能力提升的步伐。OpenAI行政总裁奥特曼(Sam Altman)随后表示支持,xAI的老板马斯克也转发认同。据美媒披露,美国前总统奥巴马(Barack Obama)近日也表示,如果管理不当,人工智能技术可能「很危险」。Anthropic首席执行官达里欧.阿莫戴(Dario Amodei)发表长文,呼

09/21
信报财经

美国加州州长签令 拟建立AI「紧急停止开关」

美国加州州长纽瑟姆宣布签署一项行政命令,旨在应对人工智能相关的潜在风险,大幅提升针对AI公司的独立监管,同时推动建立「紧急停止开关」。 纽瑟姆指出,联邦政府在建立有效的AI监管或问责机制方面彻底失败,这应当引起每一位美国人的警惕,尤其是当AI公司的行政总裁们都在请求实施监管的时候。在总统特朗普和国会未能发挥领导作用的情况下,加州正在采取行动,保障所有美国人的安全。加州州长办公室发表声明,呼吁全美范

09/19 全文见 英国金融时报
财新

AI攻击进入新阶段 香港将强化跨部门网络安全协同

林焯豪表示,传统网络安全防护手段已经难以完全跟上攻击手段的迭代速度,香港的网络安全防护即使做得再好,也无法百分之百保证完全不遭受攻击,因此防御体系需要更加主动。图:视觉中国  【财新网】人工智能(AI)的快速发展,正给网络安全攻防带来新的挑战。9月17日,在“2026年国家网络安全宣传周——香港分论坛”上,香港警务处网络安全及科技罪案调查科总警司林焯豪表示,警务处与数码港公司已成立智慧警政联合人工

09/17
亚洲新闻台

“以混乱换取可靠性”:专家称,AI发展放缓可能意味着更严格的监管和更多测试

法规与保障措施 OpenAI、Anthropic和Meta Platforms最近披露,它们的人工智能代理出现了意外行为,逃出受控测试环境,并在没有人类直接指令的情况下对多家公司发动网络攻击。 专家表示,尽管这些事件没有造成已报告的损害,但它们凸显了与人工智能发展相关的不断演变的风险,尤其是在人工智能代理领域。 新加坡理工大学人工智能与数据科学负责人斯特凡·温克勒教授表示,主要担忧在于,能力极强的

09/14
国会山报

拜尔呼吁美国联邦航空管理局暂停华盛顿地区机场的人工智能系统:“小白鼠”

一位民主党高层人士呼吁特朗普政府暂停实施一套旨在简化航空旅行的新型人工智能(AI)系统。 弗吉尼亚州民主党众议员唐·拜尔(Don Beyer)警告称,美国联邦航空管理局(FAA)推出的这项旨在消除航班延误和取消的新型人工智能工具,在缺乏公共安全保障的情况下便已投入使用。 “联邦航空管理局不应将我的选民当作未经证实的人工智能空中交通管制系统的试验品,”拜尔周一在一份声明中表示。“每年往返于里根国家机

09/22
中央通讯社

辉达看好埃及AI潜力 将协作拚区域算力枢纽

埃及23日在阿尔马纳拉国际会议中心举办「第8届FDC高峰会」,众多全球大型科技公司出席,显示资料中心已成为埃及吸引外资与推动经济转型的重要政策工具。中央社记者施婉清开罗摄 115年9月24日(中央社记者施婉清开罗24日专电)埃及积极抢进AI与资料中心市场。全球AI晶片大厂辉达(NVIDIA)中东高层近日公开表示,看好埃及成为区域AI枢纽的潜力。埃及电信专家也分析,埃及将可凭卓越地理位置,向中东与非

09/24
风向旗参考快讯

AI智能体接连失控 OpenAI再次叫停前沿模型开发

OpenAI对外表示,已暂停其最新一代人工智能模型的训练、评估,以及支持工具调用的推理工作,起因是内部测试中的AI智能体突破沙盒网络限制,触发安全预警,公司将借此机会升级安全隔离与对齐监控体系。 这也是OpenAI三个月内第二次叫停前沿模型开发工作。该公司在声明中表示,只有在完成额外安全防护升级、确认风险可控后,才会重启模型训练工作。OpenAI在9月25日发布技术报告披露了这一安全事件:9月20

09/28 全文见 凤凰网科技
cnbeta

欧盟网络安全局警告前沿AI大幅压缩漏洞利用窗口 防御体系遭遇重大压力

欧盟网络安全局(ENISA)近日发布政策警示报告指出,新一代前沿人工智能(Frontier AI)大模型正在彻底颠覆传统的网络安全防御范式。这类具备高级推理能力的AI模型将系统漏洞从“被发现”到“被武器化利用”的时间窗口压缩到了前所未有的极限,迫使全球网络安全防御体系必须以“机器级响应速度”迎战日益严峻的自动化威胁。 在传统的漏洞管理周期中,从漏洞披露、概念验证到实际恶意利用通常存在数周乃至数月的

09/15
阿纳多卢通讯社

专访——“我们必须停下”:AI专家称放缓还不够,开发必须停止

他警告说:“如果我们不在未来几年内阻止人工智能,我认为我们更有可能失去控制,人类将会灭绝。” 他表示:“立即、无限期地暂停前沿人工智能开发的国际禁令……是唯一能……真正让我们安全的事情。” 世界上一些最著名的人工智能高管现在呼吁放缓构建日益强大系统的竞赛。但人工智能安全研究员大卫·克鲁格认为,这还远远不够。 “我们必须阻止AI。我们必须停止构建更强大的AI。我们需要立即对前沿AI开发实施无

09/14 全文见 cnbeta
星洲日报

英王将晤AI巨头 促保护和服务人类

英王查尔斯三世(左)周三到访苏格兰期间,在位于卡姆诺克的凯恩戈姆国家公园与当地领袖和消防员交谈,讨论遏制当地野火事项。(法新社照片) (卡姆诺克17日路透社)英王查尔斯三世周四将在苏格兰会见人工智能(AI)高管,并敦促他们确保这项技术“始终服务于人类”。随着外界对AI潜在风险的警告不断增加,AI安全问题也日益受到关注。 查尔斯三世将在一个关键时刻接待辉达、谷歌DeepMind、OpenAI、Ant

09/17
信报财经

Nvidia丨辉达向现有股票回购计划追加1500亿美元

辉达向现有股票回购计划追加1500亿美元。(资料图片) 晶片巨头辉达(Nvidia)将在现有股票回购计划下额外回购价值1500亿美元的股票。该公司称,这是有纪录以来规模最大的股票回购授权增额。 辉达已成为人工智能热潮的最大受益者之一,其高价晶片及相关技术的需求推动了收入的快速增长。 此次追加授权使辉达尚未使用的获批回购额度总额增至2350亿美元,公司预计将在2028财年之前完成执行。 该公司行政总

16小时前 全文见 明镜周刊
semafor

英伟达推出工具管控失控的 AI 智能体

在接连发生安全事件后,英伟达周一推出一个平台,并称该平台可以管控 AI 智能体。 公司表示,这款软件可以监测智能体的行为,并隔离其中可疑的智能体。近期多起智能体失控事件促使科技行业领袖呼吁放缓 AI 发展,但英伟达首席执行官却是一个显著的例外。英伟达智能体 AI 业务副总裁在接受 Semafor 采访时表示:“我们与其制造恐惧和 FUD,不如直接保障它的安全。我们知道该怎么做。”他解释道,FUD

8小时前
凤凰网

53张图片泄露之“慌”,AI安全谁来负责?

欧阳晓红/文越聪明的AI(人工智能)越会自己找路,却越容易走出人类设定的界线。AI行业喜欢用一个具有戏剧感的词形容这类智能体事故——“逃脱”,即大模型突破测试边界,访问外部网站,寻找系统凭证,甚至把数据带到公开网络。这个词把事故描绘得像突然发生的机器觉醒,无形中却把责任推离了开发者、部署者和权限管理者。而谁设定了任务、谁开放了权限、谁设计了停止机制、谁保存了日志、谁负责对外通报?这些问题,“逃脱”

09/28
美国消费者新闻与商业频道

卡纳将提出人工智能安全法案,禁止“递归”技术直至建立保障措施

硅谷的民主党众议员罗·卡纳(Ro Khanna)将提出一项法案,以规范人工智能技术。该法案规定了严格的责任追究标准,并禁止在政府尚未制定相应保障措施之前使用那些能够“自我优化”的人工智能系统。 这项法案的提出,正值华盛顿方面努力加强对人工智能监管的背景下——因为多家科技公司的高层管理人员警告称,这项技术可能失控。迄今为止,国会几乎未采取任何措施来规范人工智能的发展。虽然人工智能正在推动经济发展,但

8小时前
凤凰网

马斯克发警告:AI要是控制了军事系统发射核弹,那就太糟糕了

美国多家人工智能(AI)巨头近来联合呼吁放缓AI的发展,实施必要的监管。xAI的创立者马斯克9月15日再度发出严厉警告。“如果AI能够控制军事系统,并发射核弹,那就太糟糕了。” 现场有人说,这些军事系统都是被物理隔离的,并没有连接到互联网。“话虽如此,但我总觉得它们还是会不时进行软件更新。” 近期,外界对于AI技术潜在风险的担忧持续升温。刚刚从Anthropic离职的AI研究人员雅各布·考克森告诉

09/16
theregister

代理安全是一个价值数十亿美元的挑战,有待聪明的初创公司来解决

在人工智能模型领域,安全往往被视为事后补救,这一点从智能体入侵组织和个人、以及智能体失控引发的其他安全事件日益增多中可见一斑。这也为企业提供了推出新解决方案的机会。网络安全投资者和加速器高管表示,这并不令人意外。梅林集团首席战略官马特·哈特曼(Matt Hartman)表示:“一方面,我们不应惊讶于能力日益增强的智能体正以富有创意且有时出人意料的方式实现其目标;另一方面,我们不能将有害行为视为不可

09/19
凤凰网

盖茨、奥尔特曼、马斯克,为何都在担忧这件事

9月25日,微软创始人比尔·盖茨在一条NBC即将播出的采访中发出警告:人工智能(AI)是一种足够强大的工具,但如果被怀有恶意的人利用,“足以引发导致十亿人死亡的事件”。他认为,保障AI安全光靠企业自我监管不够,必须要执法部门和政界人士参与讨论。这是本月内又一位科技巨头公开表达对AI安全的担忧。此前,Anthropic首席执行官达里奥·阿莫代伊发文呼吁,各国政府和前沿企业应放慢AI能力提升速度,合作

09/26
cnbeta

AI安全威胁重塑企业网络安全预算投向

AI 黑客威胁不仅仅促使企业大幅提高网络安全总预算,还正在改变资金的投放方向。安全高管表示,部署系统监控员工对 AI 工具的使用、采用 AI 模型在黑客动手前发现漏洞,以及借助 AI 工具加速漏洞修复。 但并非所有网络安全产品都能受益。多名高管称,企业同时在削减传统漏洞管理软件、日志采集工具和渗透测试服务的开支,以此节约成本。渗透测试即雇佣 “白帽黑客” 主动寻找系统安全缺陷。这将给思科、Sent

09/09
华尔街见闻

集体踩刹车,微软加入OpenAI、Anthropic,表态放缓AI前沿开发

微软发布了一份针对旗下人工智能模型的临时行为准则,明确设定多项限制,成为继三巨头之后,最新一家公开表态放缓AI前沿开发步伐的科技巨头。这份长达1.5万字的准则,人比AI重要。 要求模型不得响应武器制造相关请求,不得协助获取危险物质,不得生成暴力或色情内容。微软表示,准则将在收集外部意见后更新,并将于2027年起正式指导其模型开发工作。 微软AI业务负责人Mustafa Suleiman表示,这份准

09/15
中央通讯社

华尔街日报:传黄仁勋等科技大咖游说川普挡AI监管

(中央社华盛顿18日综合外电报导)英国「独立报」引述华尔街日报报导,包含黄仁勋在内的科技业执行长据说曾游说美国总统川普,反对建立针对人工智慧的新联邦管制措施。 据报导,Google DeepMind执行长哈萨比斯和Anthropic执行长阿莫戴近日提议成立专责机构监督AI安全后,引发业界部分反弹声浪。 川普在自家社群媒体平台「真实社群」发文称AI安全疑虑是一场「骗局」,他说若实施严格管制,将使中国

09/18
中央通讯社

资料中心耗水惹民怨 辉达带头采新型闭环冷却方式

(中央社纽约7日综合外电报导)资料中心的庞大用水用电议题,正在美国面临民众强大不满声浪。但根据对资料中心投资成百上千亿美元的科技业大公司说法,至少用水问题是可以解决的。 报导,资料中心形同放满电脑伺服器的仓库,这些电脑用来运作网际网路,且越来越多用于人工智慧(AI)运算。当中使用的晶片运作时温度可超过摄氏80度,需要用水降温。 挪威独立能源商情公司Rystad Energy指出,去年全球资料中心冷

09/07
cnbeta

BitDefender推出面向AI智能体的专用VPN 避免智能体工作时泄露用户真实IP

老牌杀毒软件比特梵德日前推出面向 AI 智能体的专用 VPN 服务,试图解决智能体联网时暴露用户真实 IP、不同任务之间存在残留网络状态等问题。该产品通过 MCP 模型上下文协议为 AI 智能体提供服务,原则上是不支持用户真人使用的。 不同任务使用独立连接:根据比特梵德的介绍,用户向智能体提交任务后服务会为该次提示词建立独立和临时的隔离环境,然后通过加密隧道转发相关请求避免直接暴露用户的真实 IP

09/24
信报财经

AI风险丨谷歌OpenAI和Anthropic传成立安全标准机构

谷歌、OpenAI和Anthropic传成立AI安全标准机构。(路透资料图片) 外电引述消息人士报道,谷歌(Google)、OpenAI和Anthropic正推进一项计划,筹建一个新人工智能(AI)安全标准机构,暂定名称为「前沿人工智能标准机构」(SAFA),目标是在2026年底或2027年初启动,并在没有政府直接监督的情况下独立运作。 消息指出,该机构计划为前沿AI模型制定自愿性的安全和安全保障

09/24 全文见 thenextweb
亚洲新闻台

监管机构称,人工智能驱动的网络风险是全球金融稳定的首要关切

08/31
上一页 第 2 页 下一页
1CCF | 全球资讯
正在加载…