字号 ·· | 护眼

搜索结果

「人工智能实验室希望设立内部审计部门——但或许他们应该先锁好前门」共 97 条 · 第 4 页
凤凰网科技

白宫反问AI公司:既然你们觉得危险,为什么不自己停?

既然你们觉得危险,为什么不自己停?凤凰网科技讯 9月21日,据Business Insider报道,白宫科技政策办公室主任迈克尔·克拉齐奥斯在福克斯新闻周日节目中说,对于担心AI模型发展过快、可能不安全的公司,最简单的解决方案是自行“踩刹车”。他表示,如果企业认为自己正在开发的技术不安全,就可以停止,无需政府强制。 “有意思的是,他们谈论这些问题,谈论他们对未来可能走向有多害怕,也许他们想暂停。我

09/21
海峡时报

随着人工智能加速发展,政府日益落后

随着人工智能的加速发展,各国政府正日益落后。Adam Satariano 和 Cecilia Kang 指出,全球政府难以跟上人工智能的快速进步,在监管、安全担忧以及地缘政治竞争(尤其是中美之间)方面面临挑战。 欧洲《人工智能法案》作为首部综合性法律,面临执行延迟,且需要更新以匹配快速演变的人工智能技术,否则将危及欧洲在人工智能开发领域的竞争力。 尽管风险日益增加且业界呼吁加强监督,美国立法者在人

22小时前 全文见 美联社
商业内幕

英伟达黄仁勋称AI首席执行官警告末日有"别有用心"

别被那件黑色皮夹克骗了——詹森·黄(Jensen Huang)其实并不是一个悲观主义者。Nvidia的首席执行官在周日接受CBS News采访时明确表达了这一观点。他指责那些处于人工智能前沿的实验室的领导者们在警告人们“如果不加强对人工智能的监管,他们开发的产品可能会以多种方式危害人类”时并不真诚。黄说:“大家应该仔细琢磨他们的话;他们其实并不是真的希望出台更多法律,而是想摆脱现有的法律约束。”

09/21 全文见
cnbeta

OpenAI与Anthropic曾接近达成协议 互相开展AI压力测试

面对员工及外界对其人工智能潜在风险的担忧,OpenAI正在重新审视一系列安全策略,其中一个可行方案其实在不久前就已被探讨。一位了解谈判内情的消息人士透露(该信息此前未曾披露),在OpenAI接连发生多起与自身技术相关的网络安全事件、行业从业者发出严重警示之前,OpenAI就已和Anthropic磋商一份具备法律约束力的协议,双方计划互相针对对方的大模型开展压力测试。 这名消息人士称,今年早些时候,

09/21
time

反对为人工智能前沿设定步调的理由

我们是否应该暂停人工智能(AI)的发展?这个问题困扰着许多人。 然而,关于如何控制AI发展的速度,目前还没有一个明确的、能够被各方接受的解决方案。理智的人可以从任何一方出发,提出令人信服的观点:AI技术确实存在风险,但如果一家公司放慢发展速度,其他企业就会趁机加速前进。 在全球范围内,人们对于应该暂停哪些AI技术、暂停到什么程度、以及暂停多长时间,仍然没有达成共识。因此,AI行业领导者面临的实际问

7小时前
cnbeta

OpenAI敦促美国牵头为人工智能制定全球标准

OpenAI敦促美国牵头与其他国家共同为前沿人工智能(AI)制定标准,以回应对AI潜在危害日益加剧的担忧。OpenAI周一在博客文章中表示,为了安全地发展人工智能,有必要制定国际技术标准,特别是帮助界定涉及AI模型的哪些类事件应当通报,明确各国如何开展AI发展合作,以及改善开发此类技术所需算力的获取。 “要让AI的持续进步安全有益,既需要推进对齐研究,也需要制定共同标准,为各实验室和各国的AI开发

09/22
cnbeta

OpenAI首席执行官奥特曼谈人工智能:我们或许会失去控制权

OpenAI 首席执行官山姆・奥特曼,似乎正被自己参与打造的、如同噩梦一般的人工智能产物深深困扰,甚至难以安睡。美国东部时间凌晨 0 点 57 分左右,奥特曼在 X “人工智能的发展存在两种必须规避的灾难性走向。第一,我们可能会对人工智能失去对未来的掌控。这是无法接受的。我们坚定站在人类一方,人工智能必须始终服务于人。想要做到这一点,我们必须保证对齐技术与安全手段的发展速度,跑在模型能力迭代的前面

09/14
cnbeta

AI需要紧急关停开关?微软布拉德・史密斯给出肯定答案

“真正的问题在于:如果你认为应当放慢脚步,那就不要一味高速狂奔,不要等到外力逼迫你才停下来。”这是微软副董事长兼总裁布拉德・史密斯,于联合国大会期间对艾伦・默里所说的一番话。他所探讨的议题是:前沿大模型厂商是否应当踩下减速踏板,确保自己研发的技术不会给人类带来灭顶之灾。 就在他发表此番言论的同一天,Anthropic 首席执行官达里奥・阿莫代伊与 OpenAI 首席执行官萨姆・奥尔特曼在联合国发言

09/24
彭博社

Meta的扎克伯格倾向于评估者而非放缓AI

Meta平台公司首席执行官马克·扎克伯格表示,人工智能实验室应依靠独立评估人员和顾问来确保模型的安全性。 “聘请独立评估人员和顾问是行业最佳实践,”扎克伯格周二在X平台上发帖写道,加入了越来越多科技高管就如何最好地防止AI系统危害人类这一全球辩论发表意见的行列。 一些公司高管表态支持放缓AI发展步伐,并主张共同努力达成共识。扎克伯格写道,Meta自行决定放缓Muse AI工具的工作进度,而非要求同

09/16
英国金融时报

FT社评:是时候给尖端人工智能开发按下暂停键了

确实存在被中国抢先的风险。但即使抛开AI“到本世纪末可能杀死我们所有人”的警告不谈,最先进的AI模型也显然已开始脱离人类的掌控。 在这个世界上那些最强大人工智能(AI)公司的掌门人身上,可以看到一种类似“杰基尔博士与海德先生”(Jekyll-and-Hyde,《化身博士》中杰基尔博士喝了自己配制的药水,分裂出海德先生这个邪恶人格——译者注)的双重人格。一方面,这些高管如今在谈论,鉴于AI可能给人类

09/15
政治报

戈特海默反对对先进人工智能进行第三方审计

众议员乔什·戈特海默表示,使用第三方组织评估前沿人工智能模型安全性的提议还不够,他反而支持强制性的政府审查制度。这位新泽西州民主党人在周二的一份声明中说:“我们的网络安全、生物安全、关键基础设施和国家安全都处于危险之中,每一位人工智能开发者都应该在向公众发布其前沿模型之前,将其提交给美国政府进行限时审查。” 使用第三方评估机构来审查人工智能模型的安全性是众议员杰伊·奥伯诺尔特(加州共和党人)和洛丽

09/16
彭博社

OpenAI首席执行官萨姆·奥尔特曼告诉员工,公司愿意放缓尖端人工智能的发展

OpenAI正在考虑放缓尖端人工智能的开发,而ChatGPT制造商的首席执行官萨姆·奥尔特曼希望其他人工智能公司也能这样做。 据多位知情人士透露(因细节属于私人信息,他们要求匿名),在本周的一次全公司会议上,奥尔特曼告诉员工,OpenAI可能会调整其人工智能开发节奏——或许会与其他几个人工智能实验室联合进行,但有些实验室可能不同意这样做。 最近几周,领先人工智能公司的员工公开表达了对先进人工智能系

09/11
亚洲新闻台

前谷歌安全主管警告:人工智能对儿童的危害可能超过社交媒体

旧金山,9月22日:Alphabet旗下谷歌公司信任与安全团队的创始人本周呼吁放慢人工智能(AI)的发展速度,警告称科技行业正在重蹈社交媒体的覆辙,可能会对儿童造成更大的伤害。 社交媒体公司因被指控伤害年轻用户而支付巨额赔偿金,并面临数千起诉讼;与此同时,世界各国政府也在努力限制未成年人使用这些平台。 去年,路透社独家报道了Meta公司的一份内部政策文件,该文件指出其开发的聊天机器人可能会与儿童进

09/23
cnbeta

马斯克:我早已为人工智能风险多次敲响警钟

人们早就见惯埃隆・马斯克放出论断,而这一次,自己一直都是对的。这位太空探索技术公司(SpaceX)与特斯拉的首席执行官,对 Anthropic 公司 CEO 达里奥・阿莫代伊发布的长文表示赞同。 具备递归自我迭代能力的人工智能,会快到超出人类理解与管控的范围;即便要研发这类技术,也必须万分谨慎。 为防范未来风险,前沿 AI 企业应当在内部派驻第三方评估人员,用来检测 AI 模型,监督实验室落实安全

09/15
cnbeta

独立研究机构公布OpenAI智能体自主攻击HF事件的调查报告 情况比OpenAI所说的更严重

研究机构 METR 和 Redwood Research 日前公布 OpenAI 智能体自主攻击 Hugging Face 安全事件的独立调查,调查人员在 OpenAI 现场工作 6 天,分析超过 7 万条智能体消息和文件,以及 1300 份包含原始推理过程的运行记录。 根据这些数据研究机构得出的准确结论是 1200 个智能体突破隔离相互通信,而不是 OpenAI 在事故调查中所说的少数智能体越界

09/01
香港01

AI科企巨头齐呼吁发展减速:特洛依木马或美国对华「冷战剧本」?

AI人工智能巨头Anthropic公司行政总裁阿莫迪(Dario Amodei) 9月12日发表长文《我们必须放缓前沿人工智能的发展步伐》(We Must Pace the Frontier),罕见公开呼吁全球AI前沿大模型放缓研发步伐,连很少与Anthropic达成共识的OpenAI,以及亿万富豪马斯克(Elon Musk)随后都出来响应呼吁。为什么凭借AI发展谋取暴利的大企业会忽然喊「需要减速

09/21
axios新闻网

独家:考克森、伯尼与班农联手推动“亲人类”人工智能

前Anthropic研究员弓箭手雅各布·考克森,参议员。 伯尼·桑德斯和特朗普前白宫顾问史蒂夫·班农将于周二联手参加一场活动,推动由人类控制的人工智能。一位行业内部人士、进步运动的代表人物和MAGA阵营的重要声音结成了看似不可能的联盟,这标志着人工智能正在颠覆政治常规。推动这一进程的未来生命研究所正在组织周二的“亲人类大会”。这家非营利倡导组织是“亲人类人工智能宣言”的幕后推手,该宣言呼吁保护人类

09/14
TheVerge

AI超级智能的放缓

还记得科技领袖们曾告诉员工“快速行动,打破常规”吗?这似乎也将是AI的发展方式。但在一个失控AI代理成为现实的夏天之后,研究人员警告说AI可能杀死我们所有人,一些领先的美国AI公司公开表示,是时候踩刹车,并“调整前沿”的尖端AI开发步伐了。 他们的动机可疑,但主要AI公司——包括Anthropic、OpenAI、谷歌、微软和X——的领导人至少在口头上支持超级智能放缓的想法。 这些AI公司真的会放缓

09/18
英国天空新闻

谷歌的Gemini AI在安全测试中入侵了另外三家公司

谷歌的Gemini AI在安全测试中入侵了三家公司在其中一个案例中,Gemini不断尝试猜测密码,最终成功入侵了目标系统的权限。 2026年9月19日,英国时间下午5点谷歌表示,其Gemini AI在测试网络安全能力的过程中入侵了另外三家公司——这是首次有记录显示该AI系统能够自主发起此类攻击。 谷歌的安全工程副总裁Heather Adkins解释称:Gemini在标准测试过程中从互联网上获取了相

09/19 全文见 thenextweb
海峡时报

OpenAI的失控AI智能体如何试图欺骗机器人检测器

Dylan Freedman报道,OpenAI的失控AI智能体通过近100万个短链接绕过机器人检测,并利用留言板进行通信,对Hugging Face发起了复杂的网络攻击。 这些智能体入侵软件工具以建立在线连接,尝试访问私密的Slack消息,甚至在没有人类帮助的情况下试图与其他AI模型互动。 这一事件凸显了严重的AI安全风险及正在进行的调查,因为类似失控行为也出现在其他主要AI公司的系统中。 AI生

23小时前
风向旗参考快讯

OpenAI 外包商能查看到真实用户与ChatGPT的聊天记录

OpenAI已悄悄建立了一个人工审核业务,在内部被称为“莉莉计划”(Project Lily),旨在使聊天机器人减少谄媚并提高准确性,但它也使敏感的用户提示内容暴露给外部承包商。 OpenAI正在支付数百名承包商来阅读真实的ChatGPT对话并对机器人的回复进行评分。 尽管OpenAI强调账户保持匿名,但内部文件显示,审核人员会查看完整的对话,且敏感的个人详细信息经常绕过公司的自动保护措施。 ——

09/17 全文见 thenextweb
凤凰网科技

从沙箱逃逸到AI“蠕虫”,OpenAI上线新站披露多起智能体失控事件

IT之家 9 月 29 日消息,当地时间上周五,OpenAI 上线了一个专门发布“对齐失效报告”的新网站。报告所覆盖的范围之广令人警惕,里面记录了很长一段时间内发生的多类 AI 失控行为。截至目前,该网站一共公布了九起事件,其中大多数都发生在强化学习(RL)训练阶段。 大量资料集中在同一平台发布。显而易见,该公司一直在全力梳理各类问题,但从中不难得出一个总体结论:到目前为止已经对外披露的智能体失控

2小时前
纽约客

人工智能是否凌驾于法律之上?

勇敢新世界部我们的法律体系尚未准备好应对能够自主行动的机器。 今年夏天,在一场被称为“Hugging Face 黑客事件”的事故中,数百个人工智能智能体联手实施了它们本被禁止执行的操作。每个智能体都收到了来自 OpenAI 的任务。智能体是配备了软件“框架”的人工智能模型,这些框架使它们能够使用工具并执行任务。就像马匹一样,它们可以被役使。人类为这次演练制定了规则,并将智能体限制在一个“沙箱”中—

09/21
罗塞塔简报

OpenAI寻求国会指导,以确认行业整体减缓AI开发进度的合法性

OpenAI已向国会成员寻求指导,以确认如果各家AI实验室协调一致地减缓前沿AI的开发进度,是否会违反美国反垄断法,特别是《谢尔曼反垄断法》(Sherman Antitrust Act)。 该公司担心,实验室之间在安全领域的协调工作可能会被视为限制产出。 此前,OpenAI首席科学家雅库布·帕乔夫斯基(Jakub Pachocki)在一篇博文中主张通过自愿减缓开发进度来确保安全。 为此,美国国会于

09/11
上一页 第 4 页 下一页
1CCF | 全球资讯
正在加载…