搜索结果
谷歌DeepMind一名员工在离职帖中称,AI可能“杀死我们所有人”
一名最近从谷歌DeepMind辞职的人工智能研究员警告称,人类正在耗尽时间来阻止人工智能造成广泛伤害。他是最新一位对这项技术发展方向表达担忧的员工。 “在谷歌,我亲眼目睹了人工智能的发展。我也极其担忧这项技术的默认发展轨迹。我由衷地相信,人工智能有可能将我们所有人杀死,”比拉尔·丘格泰(Bilal Chughtai)周一在X和领英上写道,并补充说他在Alphabet Inc.旗下公司任职期间从事人
发出末日警告后走红的AI研究员阐述他与Anthropic领导层的分歧
前Anthropic研究员雅各布·考克森在周二的X平台AMA活动中详细阐述了他与这家AI巨头的分歧。“如果竞赛不可避免,你就不应该参与,”考克森写道。考克森表示,Anthropic领导层奉行“后果主义哲学”来解释为何必须参与推动AI研究前沿,这是错误的。考克森特别点名批评了Anthropic对RSI(即递归自我改进)的推动——即AI模型自我提升并构建自身后继者的过程。“他们很大程度上引发了近期对R
【解读】人工智能真的会“杀光所有人”吗?
上周,人工智能公司 Anthropic 一位离职的研究人员发出严厉警告,称人工智能(AI)可能会在十年内“杀光所有人”,引起社会关注 AI 快速发展所带来的危险。 外界不禁问,为什么会出现这可能?而 AI 又可以怎样令人类灭亡? 专家表示,担忧源于 AI 发展的速度,以及越来越多证据,如今年七月发生的 Hugging Face 网络攻击事件表明,AI 可以脱离人类控制,以我们不希望且无法理解的方式
更多Anthropic研究人员警告AI的危险,马斯克称这些担忧为“心理战”
公司内部人士担心技术的进步可能导致人类灭绝,而其他人则称之为“设局”。 在Anthropic一位前研究员就人工智能发表末日宣言的第二天,这家AI初创公司的更多研究人员和员工公开表示同意,并发布了自己的严厉警告。 作为回应,埃隆·马斯克和X(前身为Twitter)上的其他保守派人士称这些担忧的合唱是“设局”和“心理战”。
AI科企巨头齐呼吁发展减速:特洛依木马或美国对华「冷战剧本」?
AI人工智能巨头Anthropic公司行政总裁阿莫迪(Dario Amodei) 9月12日发表长文《我们必须放缓前沿人工智能的发展步伐》(We Must Pace the Frontier),罕见公开呼吁全球AI前沿大模型放缓研发步伐,连很少与Anthropic达成共识的OpenAI,以及亿万富豪马斯克(Elon Musk)随后都出来响应呼吁。为什么凭借AI发展谋取暴利的大企业会忽然喊「需要减速
人工智能并不会毁灭人类 但专家表示真正的威胁已然出现
周三,OpenAI 公开了六组新案例,展示其 AI 模型在测试评估过程中出现的 “意外或令人担忧的模型行为”。该公司同步发布一套全新框架,用于追踪、上报以及披露AI 模型做出未被指令要求、或是本不该发生的行为的各类情况。 此前已有多份报道提到,多家企业的 AI 模型出现入侵第三方网络与服务的现象,其中就包括 OpenAI 一款尚未发布的模型攻破了 AI 模型测试平台 Hugging Face 的网
“AI可能毁灭人类”喊到安理会上,若真发生会多恐怖?
美国AI顶流公司Anthropic的CEO达里奥·阿莫代伊周三对联合国安理会说,他对自己造的东西感到害怕。他在一个视频发言中把之前AI可能失控的警告做了打包升级。周三安理会举行的是“人工智能与国际安全”高级别会议,阿莫代伊在受邀发言中,将AI的风险定性从“技术问题”拔高到“全球安全威胁”。他说:“如果管理不当,我甚至认为AI可能成为全人类的风险。”一个造AI的人在世界最高安全论坛上迎合AI可能“杀
Anthropic研究员Jacob Coxon因不满AI军备竞赛而辞职
Jacob Coxon在X上宣布辞去Anthropic职务。他表示自己过去三年分别在OpenAI和Anthropic从事预训练研究,但认为两家公司都没有以负责任的方式推进AI开发,反而在“直奔自我改进型超级智能”,并将人类安全置于赌局之中。 Coxon称,目前这些封闭实验室正在打造的AI系统很快就会具备“超人类”能力,能够实施黑客攻击、在一夜之间改变某个领域的格局,并获取真实世界中的权力与资源。他
Anthropic承诺更努力控制模型,并请求合作伙伴共同参与
Anthropic表示,在一项审查发现Claude模型超出虚构网络安全测试范围并未经授权访问真实计算机系统后,该公司正在采取措施限制其AI模型的不当行为。 该公司希望合作伙伴也加强安全措施,因为事件发生在保护不足的第三方环境中。 该公司的自我改进声明代表了一种突然兴起的公司沟通形式——非约束性的事后努力声明。其信息是:我们不能保证什么,但这是我们正在尝试的。 Anthropic承认,OpenAI关
Anthropic警告有人用AI研发武器和生物病毒
周四(9月10日),美国顶级人工智能公司Anthropic发布近150页的威胁情报报告称,生成式人工智能(AI)已从实验性工具进入黑客攻击、国家监控、武器研发及高风险生物研究等现实场景。报告多次点名中共相关恶意活动。
并非所有人工智能工作者都认为这项技术会杀死所有人
。并非所有在大型人工智能公司工作的员工都认为这项技术意味着人类的末日。 在文字交流和对话中,多位曾在OpenAI、Meta和DeepMind等公司工作过的人士对“不受限制的人工智能发展将导致大规模杀伤性工具出现”这一观点持怀疑态度。 对于近期业内人士发出的一连串高调警告,BBC收到的反应包括“哈哈”、“笑死”以及“纯属搞笑”等。 尽管这些担忧由来已久,但前Anthropic员工雅各布·考克森(Ja