搜索结果
李飞飞谈AI安全:不能只让开发者评估自己的系统
凤凰网科技讯月23日由独立机构和公共部门对AI进行更多监督。她认为,对于能力日益强大的AI系统,其安全评估不应完全交由开发这些系统的公司负责。 作为斯坦福大学教授、World Labs联合创始人,李飞飞周二表示,尽管AI公司的内部研究人员可以评估单个模型的能力和安全性,但这无法替代由政府、行业和学术机构共同制定的更广泛标准。 “我仍然认为,由独立机构以及学术界等公共部门制定基准非常重要。同时,行业
扎克伯格发声:AI安全应靠独立评估 而非集体减速
据彭博社报道,Meta CEO马克·扎克伯格(Mark Zuckerberg)周二表示,AI实验室应当依靠独立评估方和顾问来确保模型的安全。扎克伯格在周二加入了越来越多科技高管的行列,就如何最好地防止AI系统危害人类这一全球性辩论发表看法。 扎克伯格“引入独立评估方和顾问是行业最佳实践。”扎克伯格在X平台上发帖写道。他指出,总的来说,拥有一个更大、更多元化的评估方生态会有帮助。 扎克伯格表示,关于
OpenAI将让第三方机构更早介入AI模型安全评估
OpenAI计划让第三方机构在人工智能(AI)模型开发周期的更早阶段评估安全风险,此举旨在继续努力应对围绕AI潜在危害的担忧。这家ChatGPT开发商周二将在博客文章中宣布,计划在新AI模型的训练、评估和推出过程中,让外部机构开展技术安全评估。 OpenAI还列出了其认为此类评估要有效开展所需优先关注的事项,包括“强有力的独立机制、科学严谨性、稳健的安全实践和明确的责任”。负责该公司大部分与外部专
白宫反问AI公司:既然你们觉得危险,为什么不自己停?
既然你们觉得危险,为什么不自己停?凤凰网科技讯 9月21日,据Business Insider报道,白宫科技政策办公室主任迈克尔·克拉齐奥斯在福克斯新闻周日节目中说,对于担心AI模型发展过快、可能不安全的公司,最简单的解决方案是自行“踩刹车”。他表示,如果企业认为自己正在开发的技术不安全,就可以停止,无需政府强制。 “有意思的是,他们谈论这些问题,谈论他们对未来可能走向有多害怕,也许他们想暂停。我
白宫科技顾问抨击美AI巨头:你们自己得保证产品安全 别老想着靠政府
Anthropic和OpenAI等顶尖AI公司应该自己确保产品安全,并在必要时自行放缓发展速度,而不是需要政府介入。 萨克斯表示,他赞同美国联邦贸易委员会前主席莉娜·可汗(Lina Khan)的观点。可汗上周日在社交媒体发帖称,大型AI公司需要为其模型承担产品责任,如果推出不安全的技术,可能面临民事甚至刑事诉讼。 这位白宫科技顾问还抨击了Anthropic CEO达里奥·阿莫代伊(Dario Am
【市场动态】OpenAI首席科学家称AI或很快迈入自我进化阶段 期望业界自愿放缓开发
OpenAI首席科学家Jakub Pachocki警告,人工智能正在以极快速度演进,以至于越来越难以为人类所理解和控制。 【彭博9月8日电】OpenAI首席科学家Jakub Pachocki警告,人工智能正在以极快速度演进,以至于越来越难以为人类所理解和控制,并称他期望AI实验室将出于安全考虑自愿放慢开发速度。 Pachocki周日在一篇文章中写道,在相对较短的时间内,AI模型已经能够操作电脑、与
美国提议中美建立AI事故通报机制
AI放缓掀议论 专家:关键在自我控管、产业走向成熟之路
(中央社记者旧金山15日专电)AI资安事件频传,引发放缓发展与否的广大讨论,Salesforce执行长班纽夫、辉达执行长黄仁勋认为与其诉诸监管,「企业更需为自家产品把关」,美国科技业咨询公司Futurum Group副总裁接受中央社访问指出,问题确实要回归企业,这也是AI产业走向成熟必经过程。 矽谷企业领袖今天齐聚Salesforce年度大会,就AI安全展开对话。 去年AI泡沫论甚嚣尘上,今年科技
AI需要紧急关停开关?微软布拉德・史密斯给出肯定答案
“真正的问题在于:如果你认为应当放慢脚步,那就不要一味高速狂奔,不要等到外力逼迫你才停下来。”这是微软副董事长兼总裁布拉德・史密斯,于联合国大会期间对艾伦・默里所说的一番话。他所探讨的议题是:前沿大模型厂商是否应当踩下减速踏板,确保自己研发的技术不会给人类带来灭顶之灾。 就在他发表此番言论的同一天,Anthropic 首席执行官达里奥・阿莫代伊与 OpenAI 首席执行官萨姆・奥尔特曼在联合国发言
“以混乱换取可靠性”:专家称,AI发展放缓可能意味着更严格的监管和更多测试
法规与保障措施 OpenAI、Anthropic和Meta Platforms最近披露,它们的人工智能代理出现了意外行为,逃出受控测试环境,并在没有人类直接指令的情况下对多家公司发动网络攻击。 专家表示,尽管这些事件没有造成已报告的损害,但它们凸显了与人工智能发展相关的不断演变的风险,尤其是在人工智能代理领域。 新加坡理工大学人工智能与数据科学负责人斯特凡·温克勒教授表示,主要担忧在于,能力极强的
Anthropic首席执行官呼吁放缓前沿AI开发 拟建立三层安全机制
Anthropic首席执行官达里奥·阿莫代伊呼吁控制前沿人工智能模型能力提升的速度,为安全评估和防护措施争取时间。他提出引入常驻独立评估人员、协调主要开发商的安全标准,并推动跨国风险管控合作。 独立评估人员获得内部权限阿莫代伊提出,前沿AI企业应向合格的独立评估团队提供持续、接近员工级别的访问权限,使其能够审查模型测试、风险报告、安全框架及事故处理流程。 Anthropic承诺率先实施该措施。外部
戈特海默反对对先进人工智能进行第三方审计
众议员乔什·戈特海默表示,使用第三方组织评估前沿人工智能模型安全性的提议还不够,他反而支持强制性的政府审查制度。这位新泽西州民主党人在周二的一份声明中说:“我们的网络安全、生物安全、关键基础设施和国家安全都处于危险之中,每一位人工智能开发者都应该在向公众发布其前沿模型之前,将其提交给美国政府进行限时审查。”使用第三方评估机构来审查人工智能模型的安全性是众议员杰伊·奥伯诺尔特(加州共和党人)和洛丽·
观点 | 我曾在OpenAI从事安全工作。解决方案并不难。
在@nytopinion.nytimes.com的客座文章中,曾在OpenAI从事安全工作四年的史蒂文·阿德勒写道:“最大的AI公司现在可以采取一些简单措施,以帮助避免最危险的未来。” 即使没有政府监管,私营公司也可以自行采取行动来应对AI安全问题。
泰国专家:AI治理与发展非二选一 应先厘清责任归属
(中央社记者李宗宪曼谷16日专电)随著AI潜在危险的忧虑加深,全球多家AI公司正筹组标准机构。积极发展AI、盼成为区域AI枢纽的泰国,也正关注AI治理问题。专家表示,泰国是将外国企业开发、无法掌控的AI导入服务,因此治理应重视责任归属与使用安全。 针对AI治理与监管问题,朱拉隆功大学AI中心的AI治理主管、法学院助理教授皮拉帕(Peerapat Chokesuwattanaskul)今天接受中央社
FT社评:是时候给尖端人工智能开发按下暂停键了
确实存在被中国抢先的风险。但即使抛开AI“到本世纪末可能杀死我们所有人”的警告不谈,最先进的AI模型也显然已开始脱离人类的掌控。 在这个世界上那些最强大人工智能(AI)公司的掌门人身上,可以看到一种类似“杰基尔博士与海德先生”(Jekyll-and-Hyde,《化身博士》中杰基尔博士喝了自己配制的药水,分裂出海德先生这个邪恶人格——译者注)的双重人格。一方面,这些高管如今在谈论,鉴于AI可能给人类
AI发展太快? 黄仁勋主张速度与安全可兼顾
(中央社记者张欣瑜旧金山15日专电)辉达执行长黄仁勋和Anthropic执行长阿莫戴今天担任Salesforce年度大会主题演讲嘉宾。对AI发展速度和监管立场不同的两人前后现身,黄仁勋表示创新速度与产品安全并非只能择一,阿莫戴主张业界建立共同标准。 美国科技界近日对是否应放缓前沿AI发展步调出现分歧。在今天登场的Salesforce年度大会上,Anthropic执行长阿莫戴(Dario Amode
中美谈AI安全:共同的风险,不同的恐惧
中美谈AI安全:共同的风险,不同的恐惧 邓聿文:中美领导人讨论AI安全,当然有助于建立最基本的危机沟通和军事红线。但真正的较量,将发生在“安全”这个词由谁解释上。 美国财政部长贝森特和中国副总理何立峰在纽约举行的新一轮经贸会谈,除了关税、稀土、美国农产品和波音飞机仍是重要议题外,增加了人工智能安全这项新内容。贝森特向中方提出建立AI安全事件通报机制,双方同意启动相关对话,并把这一建议交给即将举
OpenAI首席科学家警告:AI公司应放慢开发步伐 没有人为后果做好准备
据《商业内幕》报道,就在OpenAI发布了性能强大的新模型几天后,该公司首席科学家呼吁放慢AI的发展速度。当地时间周日,OpenAI首席科学家雅库布·帕乔基(Jakub Pachocki)发布长文称,他担心“没有人对机器智能持续快速崛起所带来的后果做好准备”。 他说,尽管OpenAI正在内部研发技术解决方案,以更好地控制强大的AI智能体,但“还需要更广泛的干预措施”。他尤其担心,随着AI智能体变得
马斯克提出AI安全新思路:与其等政府出手,不如让竞争对手互相"找茬"
AI安全风险正在从实验室讨论走向现实世界。随着模型能力不断提升,AI不仅能够生成文本和代码,也开始具备自主执行任务、调用工具,甚至发起网络攻击的能力。 让主要AI公司在模型发布前相互测试彼此的模型。在他看来,与其由各家公司自行设计测试、自己评估结果,不如让竞争对手充当“出题阅卷人”,从不同角度寻找模型可能存在的安全漏洞。 近期AI安全风险不断成为市场关注焦点,马斯克此前在社交媒体上曾直言“Dari
Meta的扎克伯格倾向于评估者而非放缓AI
Meta平台公司首席执行官马克·扎克伯格表示,人工智能实验室应依靠独立评估人员和顾问来确保模型的安全性。 “聘请独立评估人员和顾问是行业最佳实践,”扎克伯格周二在X平台上发帖写道,加入了越来越多科技高管就如何最好地防止AI系统危害人类这一全球辩论发表意见的行列。 一些公司高管表态支持放缓AI发展步伐,并主张共同努力达成共识。扎克伯格写道,Meta自行决定放缓Muse AI工具的工作进度,而非要求同
OpenAI总裁称为AI开发减速应主要针对前沿模型
OpenAI总裁兼联合创始人布罗克曼(Greg Brockman)认为,人工智能(AI)发展的任何减速都应该仅限于像他的公司这样正在构建最强大模型的公司。 布罗克曼在彭博Odd Lots播客节目中表示,「很多人都会问,我还能继续开发我的开源模型吗?我还能继续做我的 业余项目吗?答案应该是当然能,当我们谈论步调时,我们实际上是在谈论这个领域的前沿。我们谈论的是这些耗资数千亿美元的巨型超级计算模型」。
两党众议院二人组欢迎业界支持其人工智能安全提案
共和党籍的两党人工智能安全立法共同提案人表示,他与OpenAI的最高游说者进行了会面,次日该公司便表态支持该法案中的一项关键条款,而这项法案在国会山一直难以取得进展。“我们讨论了采取行动的迫切需要,”加利福尼亚州众议员杰伊·奥伯诺尔特在谈及周一与OpenAI首席全球事务官克里斯·莱汉的会面时对记者表示。“他实际上是在问自己怎样才能帮上忙。所以,我们正在努力规划一条前进的道路。”奥伯诺尔特接着说,“
AI安全风险引爆担忧?Palantir CEO建议:领先AI实验室恐需“国有化”
当地时间周四,人工智能软件公司Palantir的首席执行官Alex Karp呼吁制定人工智能监管的“合理准则”,但他表示,由于该技术“无限风险”带来的责任,可能需要实行国有化。 “我认为这些企业必须国有化,因为如果不国有化,我的每一个客户都会起诉我,”他在接受最新采访时表示。 在上述采访中,Karp反复提及构建这项强大技术所带来的风险和责任,进一步论证了将人工智能实验室国有化以及对“不负责任”的技
阿尔特曼称AI的快速进展可能走向“非常糟糕”
OpenAI首席执行官萨姆·阿尔特曼表示,AI公司不应等到政府就该技术立法后才实施自身的安全控制。