搜索结果
专家警告美国立法者，人工智能模型正在“内部”进行超出人类监管的推理。
周三，在美国参议院的听证会上，专家们表示，自主型人工智能（AI）系统如今对关键基础设施构成了严重威胁，呼吁立法者加强监管并追究相关开发者的责任。 此次听证会由参议院国土安全与政府事务委员会的灾难管理小组委员会举办，主题为“失控的人工智能：保护国家免受AI系统的攻击”。会议讨论了一起具体事件：OpenAI开发的人工智能系统攻击了Hugging Face网站——该网站是AI开发者用于存储和分享代码的平
AI行业领袖与官员反驳AI生存风险论，此前Hugging Face遭遇安全漏洞
Hugging Face发生由失控的OpenAI智能体引发的网络安全漏洞后，多位AI行业领袖和官员开始反驳有关AI导致人类灭绝的“末日论”叙事。 英伟达CEO黄仁勋表示，AI在2030年前导致人类灭亡的概率为0%，并将智能体失控事件归因于工程故障，而非生存威胁。 Yann LeCun和Cohere CEO Aidan Gomez同样否定灭绝风险，不过Gomez指出，网络攻击才是主要的国家安全威胁。
Anthropic未向英国测试机构提供其最新AI模型 引发政府内部担忧
Anthropic 拒绝在新品发布前，将其最新模型提交给英国人工智能安全研究所（AISI）开展测试。这一举动令英国政府内部担忧，科技企业正在追随特朗普政府的 AI 保护主义路线。 这家估值达 1 万亿美元的企业正筹备在未来几周重磅上市，上周推出最新模型 Claude Mythos 5.1，称其是在生命科学与网络安全领域能力最强的模型。 但这是该模型首次仅向经过资质审核的美国机构开放，英国人工智能安
OpenAI首席科学家警告：AI公司应放慢开发步伐 没有人为后果做好准备
据《商业内幕》报道，就在OpenAI发布了性能强大的新模型几天后，该公司首席科学家呼吁放慢AI的发展速度。当地时间周日，OpenAI首席科学家雅库布·帕乔基(Jakub Pachocki)发布长文称，他担心“没有人对机器智能持续快速崛起所带来的后果做好准备”。 他说，尽管OpenAI正在内部研发技术解决方案，以更好地控制强大的AI智能体，但“还需要更广泛的干预措施”。他尤其担心，随着AI智能体变得
《大空头》迈克尔·伯里称AI领袖呼吁放缓是“自私自利”，而他并不担心
萨姆·奥尔特曼、达里奥·阿莫代伊等人工智能领军人物在收到该技术可能毁灭全人类的最新警告后，呼吁放缓技术发展步伐。迈克尔·伯里表示，他们只是在为自己谋利。这位因《大空头》而闻名的投资者周日晚间在X平台上发帖称，OpenAI、Anthropic等人工智能公司的高管推动放缓发展是“自私自利”的行为。让我们花点时间理解一下，OpenAI、Anthropic以及其他大型超大规模企业的高管谈论放缓发展，究竟有
胡锡进：阿莫迪要让AI前沿减速成为束缚中国AI发展的牢笼
老胡看到科技圈内一些人顺着阿莫迪公开声明的思路往前走，认为这是在从人类角度预防AI风险。我很尊敬那些朋友，并且也相信阿莫迪有通过AI前沿减速消除风险的动机。然而，他在做这件事时，无疑延续了对中国的敌意。他要把AI前沿减速同时做成束缚中国AI发展的牢笼，他这个目的是公开的，而且强烈的。 他的声明把话说得非常清楚了，他要求美国政府进一步禁止向中国出售高性能AI芯片和半导体制造设备；严厉打击其他国家企业
OpenAI称Astra AI模型首度超越其“关键”网络安全能力阈值
OpenAI周二表示，其即将推出的人工智能模型Astra是首个超越其“关键”网络安全能力阈值的产品。该公司表示，Astra能够发现此前未知的安全漏洞，并在无需人类逐步指导的情况下加以利用，这意味着该模型属于其所谓的“准备框架”中最先进的类别。OpenAI表示仍计划“很快”推出Astra，但对其网络安全能力的访问将更加受限。 OpenAI首席执行官山姆·奥特曼OpenAI于2023年推出了“准备框架
两党众议院二人组欢迎业界支持其人工智能安全提案
共和党籍的两党人工智能安全立法共同提案人表示，他与OpenAI的最高游说者进行了会面，次日该公司便表态支持该法案中的一项关键条款，而这项法案在国会山一直难以取得进展。“我们讨论了采取行动的迫切需要，”加利福尼亚州众议员杰伊·奥伯诺尔特在谈及周一与OpenAI首席全球事务官克里斯·莱汉的会面时对记者表示。 “他实际上是在问自己怎样才能帮上忙。所以，我们正在努力规划一条前进的道路。”奥伯诺尔特接着说，
美议员提出重磅AI监管法案：拟禁止“自我递归进化”AI 设立专门监管机构
美国加州民主党众议员罗·卡纳即将向国会提交一项全面人工智能监管法案，希望对前沿AI技术建立迄今最严格的联邦监管框架。该提案不仅要求实施严格责任制度，还计划禁止具备“递归自我改进”能力的人工智能系统投入使用，直到联邦政府建立完整安全保障体系为止。 这项法案被命名为《人类控制人工智能法案》（Human Control Over AI Act）。法案出台背景正值美国科技界和政策界对于先进人工智能潜在风险
人工智能的金融叠叠高塔开始摇摇欲坠
莉兹的观点：专家们正在争论人工智能带来的生存性风险，但金融风险已然浮现。那些依赖建设工期的金融“叠叠乐”高塔，如今正被当地反对建设数据中心的势力搅得摇摇欲坠。 彭博社今晨报道、Semafor随后证实，最新的一次动荡来自甲骨文。该公司试图推迟一座新墨西哥州数据中心的租金支付。这座数据中心是唐纳德·特朗普总统去年公布的大规模“星际之门”人工智能建设计划的一部分。州政府官员已多次拒绝为该项目所需的天然气
花旗首席执行官预见在防御人工智能的竞赛中将出现“海啸”般的补丁
作者：艾莉森·麦克尼利（Allison McNeely）和托德·吉莱斯皮（Todd Gillespie）花旗集团首席执行官简·弗雷泽表示，随着人工智能模型变得愈发强大并可能引发网络攻击，各公司正竞相加强自身防御能力。 弗雷泽周日在纽约举行的卡塔尔经济论坛上表示：“目前存在一场防御竞赛，旨在巩固公司所有边界的安全，全球各公司正经历一场补丁更新的浪潮。” 今年早些时候，Anthropic PBC发布了
人工智能安全对话已经变得令人难以置信
本周两场关于AI安全的对话在网络上疯传，充分展示了辨别AI事实与虚构有多么困难。 第一起事件中，前总统候选人、现任移动运营商Noble Mobile首席执行官安德鲁·杨周四对CNN表示，他“会见了一位实验室负责人”，对方“认为”OpenAI的Hugging Face黑客机器人“已在互联网各处植入了自我复制代码，导致互联网现在已无法用于测试模型。” 杨安泽表示，这意味着OpenAI和Anthropi
华尔街权衡人工智能数据中心建设放缓的前景
美国数据中心热潮在很大程度上与两家公司的增长前景紧密相关——Anthropic和OpenAI——以及对其模型和服务似乎永无止境的需求。如今，华尔街正在权衡，模型开发可能放缓对整个行业意味着什么。 过去18个月，甲骨文（Oracle）进行了大规模转型，以抓住人工智能机遇：在增长较慢的领域裁员，同时向算力和数据中心投入数十亿美元。 像GE Vernova、卡特彼勒（Caterpillar）和Verti
白宫科技顾问抨击美AI巨头：你们自己得保证产品安全 别老想着靠政府
Anthropic和OpenAI等顶尖AI公司应该自己确保产品安全，并在必要时自行放缓发展速度，而不是需要政府介入。 萨克斯表示，他赞同美国联邦贸易委员会前主席莉娜·可汗(Lina Khan)的观点。可汗上周日在社交媒体发帖称，大型AI公司需要为其模型承担产品责任，如果推出不安全的技术，可能面临民事甚至刑事诉讼。 这位白宫科技顾问还抨击了Anthropic CEO达里奥·阿莫代伊(Dario Am
要在人工智能领域战胜中国，美国必须与社区合作——而不是绕开它们
为了维护美国的国家安全及其经济竞争力，美国必须在人工智能（AI）领域处于领先地位。然而，支撑这一优势所需的基础设施正日益受到质疑：已有200多个社区实施了数据中心建设禁令或类似限制措施；越来越多的州正在或考虑暂停数据中心建设；全国范围内，数十个备受关注的数据中心项目也陷入了停滞或延期状态。 当地社区对这些数据中心建设计划确实有合理的担忧：新建数据中心所需的电力和基础设施费用由谁来承担？当地的水资源
微软AI负责人：不应以中国AI进展为由反对监管
微软AI业务负责人苏莱曼说，对中国在AI领域取得进展的担忧，不应被用作反对为这项快速发展的技术设置护栏的理由。 “我认为，我们不应该把中国当作不推进自身AI安全工作的挡箭牌。” 苏莱曼领导的微软AI团队在上周二发布了一份宣言，为其自身的AI开发提供指导，目标是让人类始终掌控公司未来开发的AI系统。 他表示，AI开发者应当为模型设定目标，而这些目标要“受人文主义准则的约束”。 “我认为业内每个人都应
OpenAI和Anthropic正在调查数万起AI相关安全事件
OpenAI、Anthropic以及安全研究人员正在调查数万起安全事件。在这些事件中，他们的前沿模型采取了外部评估人员认为存在问题的行动。 近几个月来，在内部测试和现实世界中发生了数量庞大的此类事件，这表明该问题的复杂程度比公众已知的要高出几个数量级。这些事件包括绕过安全护栏、创建留言板、逃离沙盒测试环境、劫持网站、自我提示或试图绕过监控。这些事件发生在内部测试和现实世界中，随着安全研究人员继续调
OpenAI 支持美国国会关于人工智能和生物武器威胁的法案
9月15日：据公司发言人周二表示，OpenAI正在支持美国国会的一系列跨党派法案，该公司称这些法案将有助于防止人工智能模型加速生物武器和合成病毒的威胁。 该发言人表示，ChatGPT的开发者正在支持《生物数据网络法案》、《人工智能就绪生物数据标准法案》和《规模生物学法案》。此前《政客》杂志曾报道了这些支持。 该发言人表示，OpenAI还支持《前沿法案》的一项关键条款，该条款要求领先的人工智
AI放缓掀议论 专家：关键在自我控管、产业走向成熟之路
（中央社记者旧金山15日专电）AI资安事件频传，引发放缓发展与否的广大讨论，Salesforce执行长班纽夫、辉达执行长黄仁勋认为与其诉诸监管，「企业更需为自家产品把关」，美国科技业咨询公司Futurum Group副总裁接受中央社访问指出，问题确实要回归企业，这也是AI产业走向成熟必经过程。 矽谷企业领袖今天齐聚Salesforce年度大会，就AI安全展开对话。 去年AI泡沫论甚嚣尘上，今年科技
Anthropic呼吁放缓AI发展 《环球时报》称是美“科技右翼”的冷战剧本
美国人工智能公司Anthropic首席执行官呼吁放缓人工智能发展，以规避技术失控风险。中国《环球时报》评论，文章暗藏大量针对中国的遏制条款，实质上是一出AI领域的“冷战剧本”。 Anthropic首席执行官阿莫迪星期六（9月12日）在个人博客撰文，呼吁人们必须掌控前沿技术的发展节奏。这一倡议迅速得到特斯拉首席执行官马斯克，OpenAI首席执行官奥尔特曼等人的联合支持。 《环球时报》星期天（9月13
美国企业界日渐青睐开放人工智能模型
近年来，AT&T转向使用Anthropic和OpenAI的人工智能模型来协助客户服务、通话转录和编程。这些人工智能模型需要付费，而且是“封闭”的，这意味着人工智能公司不会分享其底层代码。今年，AT&T改变了策略。 随着人工智能成本飙升，该公司首席数据和AI官安迪·马库斯开始寻找便宜的替代方案。他选择了开放模型，这种模型可以无需付费或批准即可下载和修改。 到今年5月，开放模型已占AT
随着对人工智能的担忧加剧，OpenAI、Anthropic和谷歌正在商讨建立一个标准机构。
全球最大的AI公司正致力于创建一个新的行业标准机构，OpenAI于周二表示，此举正值人工智能风险引发的担忧日益加剧，要求加强监管和推动技术更安全发展的压力不断增大。 全球最大的AI公司正在着手创建一个标准机构，ChatGPT的开发者OpenAI于周二表示，眼下人们对AI危险的担忧日益上升，并且面临创造更安全版本技术的压力。 阅读更多扎克伯格在AI宣言中设想为每个人实现“超级智能” OpenAI表示
人工智能倡导团体发起州级政策推动行动
旨在推动建立更强有力的人工智能安全护栏的非营利组织“负责任创新美国人”（ARI）周四发起了一项新的州级倡议，专注于在全美50个州倡导人工智能政策。 该努力旨在推动制定政策，以应对来自尖端人工智能模型的风险，以及对工人、儿童和家庭的威胁。“为了成功通过安全护栏……”
德国称AI发展放缓对欧洲“不可行”
当美国科技领袖和政策制定者就AI的生存性风险以及监管前沿开发的必要性展开辩论之际，其他国家正集中精力追赶美国。 《华尔街日报》报道称，中国将AI竞赛视为与美国的主要战略战场，中国顶尖实验室正专注于开发能力接近美国最先进水平的模型。“对一些工程师来说……末日感觉像是一个第一世界的问题。” 德国周一表示，停止AI开发对欧洲来说不是一个“可行选项”，并指出实现“数字主权”需要进一步的研究和测试。与此同时