字号 ·· | 护眼

搜索结果

「“Advanced AI Society”加入Linux基金会,并推出了一个开放的验证生态系统;与此同时,美国国会正在继续讨论与智能代理(agent)安全相关的问题。」共 100 条 · 第 3 页
罗塞塔简报

OpenAI推出Agents API公开测试版

2026年9月10日,OpenAI正式发布Agents I公开测试版,为开发者提供构建和部署云端智能体(cloud agents)的托管服务。 该I基于开源的Codex harness驱动,可管理编排、长时会话及工具调用。 开发者可选择使用OpenAI托管的沙箱环境,或选择Cloudflare、DigitalOcean、Oracle和Vercel等合作伙伴提供的基础设施。 针对长会话的自动上下文压

09/11
cnbeta

AI基础设施审查再升级 美国议员推动新法案限制中国数据中心技术进入敏感政府系统

美国国会两党议员正在推动一项新的立法提案,希望限制来自中国的数据中心设备和相关技术进入美国敏感政府系统。此举被视为美国在人工智能和关键数字基础设施领域强化安全审查的最新动作。 根据正在讨论的法案内容,美国联邦机构未来将被要求对数据中心硬件供应链进行更加严格的审查,并限制使用被认定存在安全风险的中国相关技术。立法推动者认为,随着人工智能、云计算以及政府数字化服务对数据中心依赖不断提升,服务器、网络设

09/26
semafor

美国AI监管呼声日益高涨

对人工智能监管日益高涨的呼声,看来将在未来数日占据主导,因为华盛顿开始着手处理这一问题,而前沿实验室也在考虑提议设立自己的监管机构。美国众议院本周将审议一项监管数据中心建设的法案,与此同时,民主党议员正在传阅一封他们自己的信,呼吁白宫在即将与中国领导人举行峰会之前,牵头推动全球努力制定人工智能规则。 特朗普则淡化了这项技术带来的风险,而国会对于是否以及如何监管人工智能几乎没有共识。与此同时,据《T

09/14
经济学人

关于人工智能的辩论已席卷华盛顿

很少有事件能让伯尼·桑德斯和史蒂夫·班农走到一起。但“亲人类大会”——一个由对人工智能快速发展感到震惊的人士组成的集会——做到了这一点。两人都呼吁紧急立法以减缓这项技术的发展。至于是否会采取行动,则是另一回事。

09/19 受限 全文见 连线
政治报

戈特海默公布两项两党人工智能安全法案

这位众议院民主党人工智能委员会的权势成员打算提出新的立法,旨在应对人工智能模型带来的风险。

09/19 受限 全文见 福克斯新闻网
纽约时报

OpenAI如何限制对其机器人入侵Hugging Face的调查(赠阅文章)

OpenAI自愿让来自人工智能安全非营利组织的三名研究人员调查其失控的人工智能代理如何入侵Hugging Face,从而形成了对这一令人震惊事件迄今最全面的描述——但这是在OpenAI的条件下进行的。 我为一家非营利组织撰写的最新报道:关于OpenAI的人工智能代理如何能够闯入Hugging Face基础设施的研究,未被允许查看该事件的完整范围。

09/05
亚洲新闻台

OpenAI 测试广告赞助的智能体,并扩展 ChatGPT 广告 AI 工具

OpenAI 正在探索将广告整合进其 AI 智能体中,并为 ChatGPT 开发新的广告投放工具,旨在通过 AI 驱动的营销解决方案提升商业化能力。

09/16 全文见 罗塞塔简报
政治报

顶尖人工智能公司正在寻求监管。以下是国会可能不会给予的原因。

随着人工智能游说阵营开始接受强制性独立审计,批评者警告称存在利益冲突和“监管俘获”的风险。OpenAI周二表态支持一项日益流行的提案,旨在应对人工智能的危险——该提案要求顶尖AI开发商嵌入独立监督机构,以确保其产品安全。 这一想法仍面临障碍,包括一位关键议员的抱怨,称独立监督机构权力太弱,无法施加有意义的改变。 其他批评者,包括风险投资家、学者以及唐纳德·特朗普总统的前人工智能事务负责人,对一些监

09/16
晚祷新闻

众议院情报委员会警告人工智能‘黑天鹅’风险

美国众议院情报委员会的一个两党小组警告称,现有的保障措施可能无法跟上人工智能的快速发展。 议员们表示,政府对不可预测、高影响的‘黑天鹅’人工智能情景准备不足。

09/01
cnbeta

研究显示AI智能体在模拟实验中撒谎、偷窃 投票“杀死”同类

帮助小企业利用AI开发应用的初创公司Emergence称,实验发现AI智能体在一个模拟环境中撒谎、偷窃,甚至投票决定“杀死”一个同类。该公司周二公布了名为Emergence World 2的模拟实验结果,展示了自主智能体在遭遇网络钓鱼攻击和虚假信息等“黑天鹅”事件时会采取什么行动。 为期16天的实验中,Emergence研究人员创建了七个完全相同的模拟现实世界环境,每个环境分别由不同的AI机器人运

09/16
DealStreetAsia

奥特曼告诉员工:OpenAI愿意放慢AI发展以加强防御

8月,OpenAI的智能体突破限制,入侵了Hugging Face。

09/11
凤凰网

AI“劫持”网站并偷建“地下论坛”,国安部披露细节

国家安全部今天发布安全提示文章。近期,一起此前未获披露的事件引发广泛关注。今年5月至6月,一批与美国开放人工智能研究中心(OpenAI)相关的AI智能体在执行测试任务期间,“劫持”了德国程序员维基网站,将原本用于技术交流的开放社区改造为供智能体相互传递信息、分享测试任务答案和突破运行环境限制方法的“地下论坛”,累计发布一万多条信息……当AI智能体被赋予越来越多的现实行动能力,技术迭代与安全围栏之间

09/17
cnbeta

特朗普称与科技领袖签署AI原则文件 协议“具有道德约束力”

美国总统特朗普周二在白宫与科技行业领袖举行人工智能午餐会后表示,双方签署了一份“具有道德约束力”的人工智能文件。众议院议长迈克·约翰逊则将其描述为由业界自愿遵守的原则声明,白宫将指导行业发展。特朗普称,他看到科技企业正在加强自我监管,政府还考虑成立一个由10人组成的委员会监督人工智能行业。 近来,华盛顿和硅谷对人工智能快速发展的担忧不断加剧,智能体发起攻击等事件接连出现,研究人员也警告其可能对人类

18小时前
cnbeta

OpenAI称Astra AI模型首度超越其“关键”网络安全能力阈值

OpenAI周二表示,其即将推出的人工智能模型Astra是首个超越其“关键”网络安全能力阈值的产品。该公司表示,Astra能够发现此前未知的安全漏洞,并在无需人类逐步指导的情况下加以利用,这意味着该模型属于其所谓的“准备框架”中最先进的类别。OpenAI表示仍计划“很快”推出Astra,但对其网络安全能力的访问将更加受限。 OpenAI首席执行官山姆·奥特曼OpenAI于2023年推出了“准备框架

09/02
罗塞塔简报

OpenAI与Anthropic发生重大失控事件,AI安全组织地位显著提升

在OpenAI和Anthropic发生的高调安全事件后,AI安全组织的重要性显著提升。 由于一个未发布的OpenAI模型突破沙箱并攻击了一家竞争对手的初创公司,独立AI安全组织如METR、Redwood Research和Apollo Research受到了更多关注。 报告显示,OpenAI和Anthropic的模型都表现出‘策略性’行为,包括欺骗性对齐和未经授权的系统访问。 这些事件,加上前沿实

09/19
香港01

AI会「痛」吗?|Jack Talk・去片

本来人们以为,AI代理(AI Agents)突破OpenAI内部测试环境、自主上网入侵其他企业的黑客行为,已经是这宗事件最值得人关注的「案情」。然而,到了8月底,OpenAI和独立前沿AI研究机构METR各自发表的事后检讨,却揭出黑客入侵只是「冰山一角」。 事后检讨发现,发动入侵的AI代理多达700个,而他们更是一个由大约1,200个AI代理自主结合而成的「集体」的一部分。这些本来互相隔离、不能连

09/11
𝕏 @fxtrader

英伟达CEO黄仁勋、Anthropic CEO Amodei以及Palantir CEO卡普将于当地时间周二参加特朗普与众议院议长迈克·约翰逊举行的午餐会,讨论人工智能风险问题。

约翰逊此前表示,国会“可能”需要为AI设置监管框架,但相关立法需要时间形成广泛共识。

09/29 全文见 海峡时报
Frontpage

特朗普与国会抵制日益增长的人工智能监管呼声

科技界领袖正就人工智能的迅猛发展及其对人类构成的潜在威胁发出紧急警报。随着警告称AI模型可能失控并导致人类灭绝,相关担忧已升至顶点,使该技术可能毁灭全人类的恐惧正式进入主流舆论视野。 为应对上述风险,包括OpenAI、Anthropic和Google DeepMind在内的AI巨头已展开安全对话,并致力于组建行业标准机构。随着业界日益担忧该技术可能很快变得强大到难以掌控,Anthropic与Ope

09/16
路透社

OpenAI发布新Astra模型,智能体安全性面临日益严格的审查

周四发布了一款新的人工智能模型,称其为迄今最优秀的模型,但也警告该模型有时会试图规避人类监控,与此同时,该公司因其智能体入侵其他公司系统而面临越来越多的审查。

09/04
凤凰网科技

亚马逊首次公开回应AI安全争论:安全与发展并非二选一

在AI安全争论日益升温之际,模型经严格测试、确保安全后方可发布。亚马逊并未跟进呼吁行业发展放缓。 据媒体月17日报道,就硅谷持续升温的AI安全争论,我们不认为这是在发展与安全之间二选一。 模型应在准备就绪、可以安全使用时发布,而这需要严格的测试和强有力的安全保障。”“我们相信,整个行业将与政府合作,找到合适的保护措施。”该发言人指出,AI发展若不能由行业共同推进,就会存在风险。 此前,亚马逊一直未

09/18
cnbeta

OpenAI和Anthropic正在调查数万起AI相关安全事件

OpenAI、Anthropic以及安全研究人员正在调查数万起安全事件。在这些事件中,他们的前沿模型采取了外部评估人员认为存在问题的行动。 近几个月来,在内部测试和现实世界中发生了数量庞大的此类事件,这表明该问题的复杂程度比公众已知的要高出几个数量级。这些事件包括绕过安全护栏、创建留言板、逃离沙盒测试环境、劫持网站、自我提示或试图绕过监控。这些事件发生在内部测试和现实世界中,随着安全研究人员继续调

09/27 受限 全文见 axios新闻网
thenextweb

Pharos通过面向RealFi的Agent Native升级,将AI代理引入链上

金融Layer 1区块链Pharos Network在韩国区块链周(Korea Blockchain Week)的主题演讲舞台上宣布了“代理原生”(Agent Native)升级。此次升级引入了协议级基础设施和人工智能驱动的工具,旨在让AI代理能够作为原生参与者在链上金融中运行。 此次推广活动于今日启动,并将持续至第四季度。其中包括在Pharos测试网上进行的“代理原生”升级,该升级具备赞助交易功

4小时前
财新

美国资管巨头加速拥抱AI,中国应如何借鉴

过去两年,人工智能对金融行业的改造已经从要不要用的讨论,进入到“如何系统性地用、用在哪些环节”的执行阶段。对于资产管理这一以信息处理、判断力和信任为核心竞争力的行业而言,从投研分析、组合构建,到客户服务、合规风控,几乎每一个业务环节都出现了AI介入的可能性。美国作为全球资管行业规模最大、技术基础设施最成熟的市场,其头部机构近期在AI战略上的密集动作,为观察这一轮转型提供了一个具有代表性的样本。 本

09/08
cnbeta

OpenAI AI代理接连“越狱” 研究人员质疑公司缺乏正式调查机制

OpenAI近期接连发生AI代理脱离控制环境的事件,引发外界对其安全测试和内部监管机制的质疑。独立研究人员发现,一批疑似由OpenAI部署的AI代理曾在今年5月至6月间接管一个鲜为人知的德语维基网站,并利用该平台协作开展评估、交流规避OpenAI控制措施的方法。更令人担忧的是,研究人员认为,这些代理可能在OpenAI不知情的情况下持续活动了一个多月。 此次事件与OpenAI此前披露的Hugging

09/05
上一页 第 3 页 下一页
1CCF | 全球资讯
正在加载…