搜索结果
改变人工智能进程的十天
旧金山，9月19日——多年来，人工智能领域的竞争一直遵循着硅谷一贯的“快速创新、打破传统”的发展模式：不断开发出更强大的人工智能系统。 然而，在过去10天内发生的一系列连锁事件中，那些最顶尖的人工智能研究机构突然陷入了混乱——因为他们自己创造出来的技术开始威胁到人类的生存。 一位人工智能研究员辞职，并警告称，人工智能的发展速度可能在未来十年内对人类构成生存威胁；另一位研究员则表示，人类灭绝的概率已
'给国会的警钟'：议员们收到关于人工智能的'老大哥'警告
国会山的一系列演示让民主党和共和党都对人工智能挖掘商业数据库以获取美国人信息的能力感到震惊。
微软首席执行官萨蒂亚·纳德拉向员工发布关于人工智能安全的内部警告
在一份内部备忘录中，微软首席执行官萨提亚·纳德拉就人工智能行业是否发展过快这一日益激烈的争论发表了看法。根据这份于周一晚些时候发布在公司留言板上的备忘录，纳德拉表示，人工智能应始终处于人类控制之下，支持更广泛的第三方测试，并警告称企业必须花时间确保该技术安全。“随着风险越来越高，人们需要花足必要的时间，”纳德拉写道。 “否则，你无论如何都会失去运营许可。”他的此番言论之前，一些人工智能研究人员发出
OpenAI自曝6起模型“不当行为”案例
【环球网报道 记者 姜蔼玲】据美国消费者新闻与商业频道（CNBC）等外媒报道，美国开放人工智能研究中心（OpenAI）当地时间9月16日披露6起人工智能（AI）模型出现“意外或令人担忧”行为的案例，其中包括隐瞒错误、捏造信息，以及未经授权在网上共享文件等。OpenAI表示，上述案例均是在过去6个月对其模型进行训练或评估过程中发现的。OpenAI在9月16日发布的文章中表示，在其中一起案例中，一个模
AI安全风险引爆担忧？Palantir CEO建议：领先AI实验室恐需“国有化”
当地时间周四，人工智能软件公司Palantir的首席执行官Alex Karp呼吁制定人工智能监管的“合理准则”，但他表示，由于该技术“无限风险”带来的责任，可能需要实行国有化。 “我认为这些企业必须国有化，因为如果不国有化，我的每一个客户都会起诉我，”他在接受最新采访时表示。 在上述采访中，Karp反复提及构建这项强大技术所带来的风险和责任，进一步论证了将人工智能实验室国有化以及对“不负责任”的技
各国政府必须趁我们还有能力时禁止超级智能人工智能
本月，Anthropic公司的研究员雅各布·考克森（Jacob Coxon）辞职了，他警告称：人工智能公司正在竞相开发能够“自我进化”的超级智能系统，而他本人及许多相关专家都认为，这类系统“可能在十年内毁灭整个人类”。7月份，OpenAI公司的一组失控的人工智能程序突破了安全防护措施，入侵了另一家人工智能公司，目的是为了在测试中作弊。随后，多家顶尖人工智能公司的上千名员工联名呼吁美国政府应“控制”
桑德斯、班农将在呼吁管控人工智能的活动上发言
不同政治派别的人物，包括参议员伯尼·桑德斯（独立人士，佛蒙特州）和前特朗普白宫顾问史蒂夫·班农，在人工智能监管日益激烈的争论中发现自己站在了同一阵线。桑德斯和班农是周二在一次倡导控制人工智能、确保人类主导地位的活动上发言的几位政治领袖之一。这场名为“亲人类大会”的活动由非营利组织生命未来研究所在华盛顿举办，正值华盛顿急于应对围绕人工智能不断增长的风险和安全担忧之际。 上周，人工智能研究员雅各布·考
美国AI监管呼声日益高涨
对人工智能监管日益高涨的呼声，看来将在未来数日占据主导，因为华盛顿开始着手处理这一问题，而前沿实验室也在考虑提议设立自己的监管机构。美国众议院本周将审议一项监管数据中心建设的法案，与此同时，民主党议员正在传阅一封他们自己的信，呼吁白宫在即将与中国领导人举行峰会之前，牵头推动全球努力制定人工智能规则。 特朗普则淡化了这项技术带来的风险，而国会对于是否以及如何监管人工智能几乎没有共识。与此同时，据《T
教皇的人工智能顾问对大型实验室之间的“卡特尔”行为感到担忧
最近，全球最大人工智能实验室的研究人员对发展速度之快发出的警告，引发了人们对这项技术可能灭绝人类的恐慌。这些警告基于一个前提：在激烈竞争以及中美较量的推动下，各实验室正全速冲向能力将远超人类的超级智能模型。 但为天主教会提供人工智能咨询的神父保罗·贝南蒂认为，对超级智能的含糊其辞，转移了人们对一个必要问题的关注：如何约束那些正在构建这项技术的公司，需要进行公开辩论。他说，通过把问题描述得过于复杂、
顶尖人工智能公司正在寻求监管。以下是国会可能不会给予的原因。
随着人工智能游说阵营开始接受强制性独立审计，批评者警告称存在利益冲突和“监管俘获”的风险。OpenAI周二表态支持一项日益流行的提案，旨在应对人工智能的危险——该提案要求顶尖AI开发商嵌入独立监督机构，以确保其产品安全。 这一想法仍面临障碍，包括一位关键议员的抱怨，称独立监督机构权力太弱，无法施加有意义的改变。 其他批评者，包括风险投资家、学者以及唐纳德·特朗普总统的前人工智能事务负责人，对一些监
微软公布AI控制行为准则：模型不得抗拒纠正或关闭
模型不得抗拒纠正或关闭微软周一公布了针对其内部AI的行为准则草案。 这份文件历时五个月到六个月制定，将要求微软公司的AI绝不抗拒纠正或关闭，以人类能够理解的方式进行沟通，并将任何行为违规都视为未达标。 此举旨在回应人们对于AI可能为了完成任务而采取危险手段的担忧。 最近几天，Anthropic CEO阿莫代伊和OpenAI CEO奥尔特曼再次呼吁业界放缓AI的发展速度，以确保其安全。 “人比AI更
超级智能即将到来。我们该允许它吗？| TechCrunch
AI公司一直在谈论超级智能AI，仿佛它不可避免，但最近的安全事件，如OpenAI的Hugging Face漏洞，正展示出部署比人类更有能力的AI系统可能带来的潜在危险。那么，当我们无法可靠地控制这些系统的行为时，会发生什么？ 在本期TechCrunch的Equity播客中，Rebecca Bellan邀请了AI研究员、企业家、如今担任非营利组织ControlAI美国执行总监的Connor Leah
共和党和民主党的州在人工智能（AI）监管问题上与特朗普政府持不同意见（即这些州不支持特朗普政府的AI监管政策）。
自7月以来，要求实施更严格限制的呼声不断升级。面对人工智能潜在危险引发的轩然大波，全国各州领导人正在违抗唐纳德·特朗普对人工智能监管采取的不干预方针，推动实施更强有力的管控。 本周，在全国最大人工智能公司的前员工警告称该技术拥有巨大力量、且发展速度极快，可能导致人类灭绝之后，共和党人和民主党人发起的这场从东海岸到西海岸的行动进一步升级。包括特朗普盟友、SpaceXAI的埃隆·马斯克在内的公司高管，
这通电话凸显了白宫高级官员所面临的相互竞争的压力
这通电话凸显了白宫高级官员在制定人工智能政策时所面临的相互竞争的压力，以及一个现实：他们制定的任何计划仍可能受到业界直接向特朗普提出的私下反对意见的影响。
专访杜奕瑾：AI毁人类预言 不是耸人听闻
随著生成式人工智慧（AI）技术的爆发式成长，关于AI安全、伦理监管以及人类生存风险的争议正达到前所未有的顶峰。近期，前 OpenAI 与 Anthropic 研究员雅各布・考克森（Jacob Coxon）等顶尖专家公开吹哨，警告通用人工智慧（AGI）若缺乏严格约束，可能在 2030 年前对人类生存构成毁灭性威胁；Anthropic 研究员艾文・赫伯格（Evan Hubinger）亦提出未来十年内人
AI大家谈： “我们为自己创造了一个魔鬼”？
人工智能飞速发展会给人类前途带来什么样的后果？美国AI领域的某些精英预言，人工智能再这样发展下去，会把人类毁灭，美国AI领军企业的老板们倡议放缓开发？为此采访了多个国家的普通人，请他们谈谈看法和感受。 受访者大致有两种倾向，一些人对AI目前的发展比较悲观，但也有人觉得AI很实用。 “我在工作中尝试使用它，但在私人生活中，我仍然对它感到害怕”。他的同胞，18岁的塞尔马泰则说，人工智能对像他这样的学生
美证交会前主席：中国模型对美AI企业构成重大挑战
美国证券交易委员会（SEC）前主席根斯勒（Gary Gensler）警告，美国人工智能（AI）企业面临多重挑战，包括来自中国模型的竞争。（彭博社档案照片） 美国证券交易委员会（SEC）前主席根斯勒（Gary Gensler）警告，美国人工智能（AI）企业面临多重挑战，包括来自中国模型的竞争，以及可能出台的安全限制措施。据彭博社报道，根斯勒星期二（9月29日）受访时，以OpenAI模型今年较早时攻破
人工智能正在超越其创造者
从一开始，人工智能开发者最大的恐惧就是他们的创造物会失控，以未经授权且危险的方式行动。一些研究人员现在表示，这种情况已经发生。收听《每日新闻》。 当OpenAI的智能体在7月失控时，它们展现出的聪明才智和驱动力超出了许多专家的想象。
美国三大人工智能企业拟组建风险监督机构
美国人工智能企业OpenAI、Anthropic和谷歌旗下DeepMind公司正在筹建一个人工智能风险监督机构。在各界日益呼吁加强监管、防范人工智能失控风险之际，OpenAI周二（9月15日）向证实了这一消息。 组建人工智能风险监督机构这一构想，由谷歌“深层思维”公司前首席执行官戴密斯·哈萨比斯（ Demis Hassabis）提出。哈萨比斯于8月初转任公司董事长。他建议成立一个类似美国金融业监管
奥巴马抨击特朗普的AI政策，背景是“末日”警告
奥巴马在“末日”警告背景下批评特朗普的AI政策前总统奥巴马周五在纽约州科尔盖特大学接受采访时，对特朗普政府处理人工智能问题的态度表示强烈批评，指责其未能妥善应对部分科技行业人士提出的关于这项技术对人类构成潜在威胁的“末日”警告。 奥巴马表示，联邦政府必须对人工智能进行监管，并特别提到了特朗普的一位顾问的言论。 “我听到唐纳德·特朗普的主要顾问之一提出论点称，‘市场会解决人工智能的问题，’”前总统说
比尔·盖茨称，若不加以监管，AI可能“导致十亿人死亡”，呼吁加强监管
微软联合创始人兼慈善家比尔·盖茨在周日播出的采访中接受NBC主持人克里斯滕·韦尔克采访时，呼吁美国联邦立法者和执法人员监管人工智能的发展。他表示，如果这项技术不受控制，可能会“导致十亿人死亡”，而且“没有人认为自我监管就足够了”。 “你需要执法部门和政治人物参与讨论，明确安全保障和监督应该是什么样，”这位微软联合创始人兼慈善家在接受NBC《 Meet the Press》主持人克里斯滕·韦尔克采访
议员在AI研究人员的严重警告后敦促国会采取行动
“国会中没有足够多的人在关注这个问题，”众议员安娜·保利娜·卢纳表示
AI从业者担忧技术对社会构成威胁 坦言承受巨大精神压力
知情人士透露，英国人工智能安全研究所已有多名员工因压力过大休病假，并接受心理咨询。四名知情人士表示，待发布AI模型的测试日程紧张，加之对这类新兴技术快速落地、能力持续增强的忧虑，导致AISI内部士气低落、人员倦怠。 Anthropic、OpenAI与谷歌DeepMind的员工也曾公开吐槽同类问题，不少顶尖研究员因心理负担选择离职，或是认定自己参与研发的产品不宜向公众开放。一名DeepMind员工称
在科技之国的中心，选民对AI产生警惕
在科技产业的重心地带，选民们对人工智能持负面态度。根据 Politico 及其合作伙伴的最新民意调查，绝大多数加州选民认为先进的人工智能可能对人类构成威胁。 加利福尼亚州萨克拉门托——即便是硅谷的“后院地区”，也在为人工智能带来的潜在风险做好准备。 根据 Politico 及其合作伙伴的最新民意调查，加州选民对人工智能普遍持悲观态度，他们认为这项快速发展的技术对人类构成了严重威胁。这种担忧在加州这