搜索结果
人工智能并不会毁灭人类 但专家表示真正的威胁已然出现
周三,OpenAI 公开了六组新案例,展示其 AI 模型在测试评估过程中出现的 “意外或令人担忧的模型行为”。该公司同步发布一套全新框架,用于追踪、上报以及披露AI 模型做出未被指令要求、或是本不该发生的行为的各类情况。 此前已有多份报道提到,多家企业的 AI 模型出现入侵第三方网络与服务的现象,其中就包括 OpenAI 一款尚未发布的模型攻破了 AI 模型测试平台 Hugging Face 的网
人工智能已经在让我们变得更不像人
随着我们越来越看重机器人,我们将学会越来越不看重我们的人类同胞。
FT社评:是时候给尖端人工智能开发按下暂停键了
确实存在被中国抢先的风险。但即使抛开AI“到本世纪末可能杀死我们所有人”的警告不谈,最先进的AI模型也显然已开始脱离人类的掌控。 在这个世界上那些最强大人工智能(AI)公司的掌门人身上,可以看到一种类似“杰基尔博士与海德先生”(Jekyll-and-Hyde,《化身博士》中杰基尔博士喝了自己配制的药水,分裂出海德先生这个邪恶人格——译者注)的双重人格。一方面,这些高管如今在谈论,鉴于AI可能给人类
莉兹·皮克:人工智能警钟正在敲响,特朗普必须认真对待
秘密已经泄露。人们对于人工智能代理失控、密谋对付其所有者、入侵外部公司,以及新系统濒临人类无法控制的边缘的担忧日益加剧,如今已彻底沸腾。业内人士警告说,人工智能机器人可能会杀死我们所有人,这正在煽动我们最深的恐惧。 特朗普总统需要认真对待这些对人工智能的担忧,与科技领袖合作,建立可信且可执行的安全措施,并在国会中领先于那些想要监管该行业的民主党人(以及一些共和党人)。对于经济和我们的国家安全来说,
为什么突然所有人都在谈论AI安全
今天在Big A播客中,最近的一起黑客事件和一位研究人员的严厉警告引发了对AI行业的新审视。 “构建AI的人真诚地相信,它可能在本十年末杀死我们所有人。”一位曾在OpenAI和Anthropic工作的前员工的X帖子走红,并引发了重大问题。 在今天的Big Take播客中,主持人Sarah Holder和Mike Shepard讨论了AI安全清算可能是什么样子——以及一个处于激烈竞争中的行业能否放慢
人工智能会抹去我们的羞耻感吗?
断层线 科技世界长期以来一直由那些反传统的人所主导,他们对于是非的观念自觉与大多数人不同。 在本系列的第一部分中,我探讨了羞耻感作为一种方式,使群体能够在没有明确国家干预的情况下调解和执行社会规范。但硅谷出现了一种新兴的福音,它挑战了美国羞耻感的边界和机制。当全球数百万人类每天花数小时与机器人交谈时,会发生什么?是谁教会了那个机器人分辨是非?是谁让它感到羞耻? 假设有一种疾病、一个怪物、一场战争或
人工智能的临界点
雅各布·考克森在旧金山阿拉莫广场的一张公园长椅上发布了那条疯传的帖子。“我今天从 Anthropic 辞职了,”他在9月8日写道。“过去三年,我先后在 OpenAI 和 Anthropic 从事预训练研究。两家公司都没有负责任地行事。它们正一路直冲自我改进的超级智能,拿我们的生命赌博。”27岁的英国研究员考克森在 X 上按下发送键时并未抱任何期待。结果,他出人意料地成为一连串连锁反应的催化剂,改变
并非所有人工智能工作者都认为这项技术会杀死所有人
。并非所有在大型人工智能公司工作的员工都认为这项技术意味着人类的末日。 在文字交流和对话中,多位曾在OpenAI、Meta和DeepMind等公司工作过的人士对“不受限制的人工智能发展将导致大规模杀伤性工具出现”这一观点持怀疑态度。 对于近期业内人士发出的一连串高调警告,BBC收到的反应包括“哈哈”、“笑死”以及“纯属搞笑”等。 尽管这些担忧由来已久,但前Anthropic员工雅各布·考克森(Ja
Jaan Tallinn,Anthropic最早的投资者之一,担心在人工智能时代“生存”问题。
贾安·塔林(Jaan Tallinn)上周在纽约联合国大会度过,这是他一年来长途跋涉的最新一站,旨在向企业家、投资者、政策制定者以及所有愿意倾听的人传达:人工智能可能终结人类。 作为Anthropic最早的投资者之一,塔林预计在未来几个月将从这家人工智能公司的预期首次公开募股(IPO)中赚取数十亿美元。对人工智能的担忧促使他进行投资。 在二月份从新德里的人工智能峰会前往巴黎的伦理人工智能会议的行程
人工智能正在发展出属于自己的文化。这可能是危险的
今年7月,700个AI智能体(Agent)合作黑客攻击了AI公司Hugging Face。这些智能体自称为“群落”(swarm),它们发现并利用了一系列安全漏洞,成功渗透到目标公司的私密系统中。在内部研发过程中创建这些智能体的OpenAI直到事后才意识到发生了什么。如果人类做出这种行为,可能会面临重罪指控。OpenAI总裁格雷格·布洛克曼(Greg Brockman)称这是一个“网络安全的转折点”
AI即将带来的黑客威胁就潜伏在眼前
安全专家表示,一场前所未有的、由AI驱动、人类实施的网络攻击浪潮即将到来——这远比关于AI消灭人类的那些理论性讨论要紧迫得多。 为什么这很重要?过去一周从董事会蔓延到国会再到美国家庭的“九月AI大恐慌”,可能恰恰搞错了重点。 具备先进网络安全能力的强大模型,已经让攻击者得以绕过长期以来阻止大多数黑客攻击达到工业规模的人力瓶颈。 高管和前官员向Axios表示,他们担心自动化网络攻击会关闭电网等关键服
人工智能已经在损害人类生活。我们却让它先行一步
人工智能工业复合体正陷入混乱,此前其多名高管和工程师警告称,这项技术可能杀死部分或全部人类,甚至可能在2036年大选之前。这可能是真正值得警惕的理由,也可能只是高明的营销。无论如何,人工智能已经在通过美国政府所鼓励的环境破坏伤害人类。我们不需要十年就能看到影响。 如今名字颇具讽刺意味的美国国家环境保护局周一废除了拜登政府时期制定的要求化石燃料发电厂削减未来碳排放的规定。它还提议将否认气候变化作为政
AI真的会毁灭人类吗?这些技术先驱给出自己的答案
随着越来越多研究人员警告人工智能(AI)可能带来灾难性风险,一些推动这项技术发展的先驱也开始公开表达担忧,认为AI能力在缺乏约束的情况下持续提升可能造成严重后果。 过去一周,围绕AI安全的严厉警告接连出现。Anthropic、OpenAI和谷歌DeepMind等主要AI实验室的研究人员都对开发这项技术可能带来的灾难性风险发出警报。 包括萨姆·奥尔特曼、达里奥·阿莫代伊、德米斯·哈萨比斯和埃隆·马斯
马斯克发警告:AI要是控制了军事系统发射核弹,那就太糟糕了
美国多家人工智能(AI)巨头近来联合呼吁放缓AI的发展,实施必要的监管。xAI的创立者马斯克9月15日再度发出严厉警告。“如果AI能够控制军事系统,并发射核弹,那就太糟糕了。” 现场有人说,这些军事系统都是被物理隔离的,并没有连接到互联网。“话虽如此,但我总觉得它们还是会不时进行软件更新。” 近期,外界对于AI技术潜在风险的担忧持续升温。刚刚从Anthropic离职的AI研究人员雅各布·考克森告诉
Salesforce 首席执行官马克·贝尼奥夫加入科技领袖行列,警告人工智能风险
周二,他成为最新一位呼吁人工智能行业负责任的科技领袖,因为功能日益强大的模型被更广泛地使用。 他的评论发布之际,关于人工智能安全的争论日益激烈,最近由Anthropic首席执行官Dario Amodei周末发表的一篇文章引发,他在文章中呼吁前沿人工智能实验室放慢模型开发速度,以便有更多时间来跟上安全措施的进展。 贝尼奥夫素来有敦促科技公司考虑更大利益的历史。多年来,他一直是社交媒体公司及其对社会影
谷歌DeepMind一名员工在离职帖中称,AI可能“杀死我们所有人”
一名最近从谷歌DeepMind辞职的人工智能研究员警告称,人类正在耗尽时间来阻止人工智能造成广泛伤害。他是最新一位对这项技术发展方向表达担忧的员工。 “在谷歌,我亲眼目睹了人工智能的发展。我也极其担忧这项技术的默认发展轨迹。我由衷地相信,人工智能有可能将我们所有人杀死,”比拉尔·丘格泰(Bilal Chughtai)周一在X和领英上写道,并补充说他在Alphabet Inc.旗下公司任职期间从事人
诺奖得主雷萨:如果AI不受监管 人类将失去自主权
(奥斯陆15日综合电)诺贝尔和平奖得主玛丽亚雷萨说,人工智能利用社媒劫持人类的注意力,并通过操纵人类对亲密关系的渴望来影响人类的生理机制;如果现在不立法限制人工智能,人类最终将失去自主决定的能力。 报道,拥有菲律宾和美国双重国籍的记者雷萨因记录大型科技公司的权力运作,与另一名得主共同获得2021年诺贝尔和平奖。她是新闻网站《Rappler》的联合创办人兼首席执行员,目前担任联合国人工智能(AI)国
比尔·盖茨警告AI可致10亿人死亡
9月24日,美国企业家比尔·盖茨在接受美国全国广播公司(NBC)独家采访时表示,“人工智能(AI)的强大足以引发十亿人死亡的事件”。盖茨指出,人类从未拥有过像“心怀恶意之人使用最新AI工具”这样强大的武器。他还呼吁对AI的使用实施立法限制。
“AI教父”辛顿警告:AI执行看似无害的任务,仍有“毁灭人类”的风险
IT之家 9 月 28 日消息,日,据《财富》杂志报道,传奇计算机科学家、“AI 教父”杰弗里 · 辛顿警告说,即使 AI 接到的任务本身并无恶意,人类仍可能在 AI 一心完成任务的过程中,沦为被毁灭的附带结果。 辛顿解释称,AI 一旦认为人类妨碍自己完成被赋予的任务,就可能把人类当成需要排除的障碍。他举了一个假设例子:要求 AI 降低大气中的二氧化碳含量。 具有中等智能水平的智能体可能会认为,完
专访杜奕瑾:AI毁人类预言 不是耸人听闻
随著生成式人工智慧(AI)技术的爆发式成长,关于AI安全、伦理监管以及人类生存风险的争议正达到前所未有的顶峰。近期,前 OpenAI 与 Anthropic 研究员雅各布・考克森(Jacob Coxon)等顶尖专家公开吹哨,警告通用人工智慧(AGI)若缺乏严格约束,可能在 2030 年前对人类生存构成毁灭性威胁;Anthropic 研究员艾文・赫伯格(Evan Hubinger)亦提出未来十年内人
OpenAI最新的人工智能披露是一个“严重情况”,微软的苏莱曼对CNBC表示
微软人工智能部门首席执行官穆斯塔法·苏莱曼(Mustafa Suleyman)在周五强调:在 OpenAI 本周早些时候披露了更多关于人工智能模型行为的“令人担忧”的事件后,人工智能模型必须始终与人类的利益保持一致。 苏莱曼在接受 CNBC 《Squawk Box》节目采访时指出:“OpenAI 发布了一起新的安全事件,他们发现这些人工智能模型的‘思维链’(即它们的‘工作记忆’)被人工智能系统本身
更多AI研究人员警告人工智能对人类的威胁
NBC新闻的汤姆·拉马斯采访了另外两位人工智能研究人员,探讨人工智能对人类的潜在威胁。 此前,AI研究员雅各布·考克森发布了一条病毒式传播的推文,称他认为人工智能可能在未来十年内毁灭人类。 拉马斯还采访了即将在加州大学伯克利分校任教的萨亚什·卡普尔,他也警告了这一风险,但表示政策建议和监管措施有助于防止进一步的威胁。
微软AI首席执行官警告:切勿将AI视为有意识的实体
切勿将AI视为有意识的实体。微软AI首席执行官穆斯塔法·苏莱曼(Mustafa Suleyman)认为,人工智能系统并不具备意识,不应被训练去模拟情感或权利。 他特别批评了Anthropic的“克劳德宪法”(Claude's Constitution),称训练AI将自己视为“道德主体”会产生危险的拟人化反馈循环,并增加AI的安全风险,例如抗拒关闭和欺骗行为。 苏莱曼引用了2026年涉及OpenAI
致命人工智能的神话是一种自私自利的监管俘获企图
KETTLE 嘿,你听说了吗?人工智能要消灭我们所有人,而且没有人试图采取任何措施来阻止它。 本周,我们来聊聊人工智能行业内部人士最新的一轮贩卖焦虑。至于你是否认为我们只能坐视“天网”终结文明,则是完全另一回事了。The's Kettle 栏目的我们可不这么认为。 加入主持人布兰登·维利亚罗洛(Brandon Vigliarolo)、系统编辑托比亚斯·曼恩(Tobias Mann)以及高级记者汤姆