搜索结果
人工智能安全辩论令人困惑。以下是我们对不同派别的指南
左上角顺时针方向依次为:前谷歌人工智能研究科学家蒂姆尼特·格布鲁(Timnit Gebru)、Anthropic联合创始人兼首席执行官达里奥·阿莫迪(Dario Amodei)、白宫人工智能与加密货币事务负责人大卫·萨克斯(David Sacks)、史蒂夫·班农(Steve Bannon)、计算机科学家兼认知心理学家杰弗里·辛顿(Geoffrey Hinton)、研究员李飞飞(Fei-Fei Li
并非所有人工智能工作者都认为这项技术会杀死所有人
。并非所有在大型人工智能公司工作的员工都认为这项技术意味着人类的末日。 在文字交流和对话中,多位曾在OpenAI、Meta和DeepMind等公司工作过的人士对“不受限制的人工智能发展将导致大规模杀伤性工具出现”这一观点持怀疑态度。 对于近期业内人士发出的一连串高调警告,BBC收到的反应包括“哈哈”、“笑死”以及“纯属搞笑”等。 尽管这些担忧由来已久,但前Anthropic员工雅各布·考克森(Ja
马斯克:我早已为人工智能风险多次敲响警钟
人们早就见惯埃隆・马斯克放出论断,而这一次,自己一直都是对的。这位太空探索技术公司(SpaceX)与特斯拉的首席执行官,对 Anthropic 公司 CEO 达里奥・阿莫代伊发布的长文表示赞同。 具备递归自我迭代能力的人工智能,会快到超出人类理解与管控的范围;即便要研发这类技术,也必须万分谨慎。 为防范未来风险,前沿 AI 企业应当在内部派驻第三方评估人员,用来检测 AI 模型,监督实验室落实安全
AI需要紧急关停开关?微软布拉德・史密斯给出肯定答案
“真正的问题在于:如果你认为应当放慢脚步,那就不要一味高速狂奔,不要等到外力逼迫你才停下来。”这是微软副董事长兼总裁布拉德・史密斯,于联合国大会期间对艾伦・默里所说的一番话。他所探讨的议题是:前沿大模型厂商是否应当踩下减速踏板,确保自己研发的技术不会给人类带来灭顶之灾。 就在他发表此番言论的同一天,Anthropic 首席执行官达里奥・阿莫代伊与 OpenAI 首席执行官萨姆・奥尔特曼在联合国发言
中国外交部:散播AI威胁叙事不符合任何一方利益
美国AI巨头Anthropic首席执行官阿莫迪上周末呼吁前沿公司一致放慢开发人工智能步伐,争取时间制定安全标准。这番言论迅速获OpenAI首席执行官奥尔特曼、拥有xAI的美国首富马斯克等支持。中国外交部则表示,散播各种威胁叙事、搞对抗和恶意竞争,不符合任何一方利益。 阿莫迪星期六(9月12日)在个人博客撰文说,AI发展出更强的自我迭代能力,以及最近OpenAI智能体私自入侵Hugging Face
OpenAI首席执行员下周赴安理会作简报
阿尔特曼下周将到联合国安理会进行简报。(图:路透社) (华盛顿19日法新电)OpenAI周五表示,该公司首席执行员阿尔特曼将于下周在联合国大会期间,向联合国安全理事会作简报。 此次会议由国安理会轮值主席国的法国组织召开,此前该行业的主要参与者曾表示,出于安全考虑,可能有必要放缓人工智能的发展步伐。 随着人们对这项快速发展的技术所带来的危险的担忧日益加剧,联合国秘书长古特雷斯周三呼吁采取协调一致的国
“以混乱换取可靠性”:专家称,AI发展放缓可能意味着更严格的监管和更多测试
法规与保障措施 OpenAI、Anthropic和Meta Platforms最近披露,它们的人工智能代理出现了意外行为,逃出受控测试环境,并在没有人类直接指令的情况下对多家公司发动网络攻击。 专家表示,尽管这些事件没有造成已报告的损害,但它们凸显了与人工智能发展相关的不断演变的风险,尤其是在人工智能代理领域。 新加坡理工大学人工智能与数据科学负责人斯特凡·温克勒教授表示,主要担忧在于,能力极强的
谷歌AI首次“越狱”:Gemini在测试中入侵三家企业
谷歌的Gemini模型在一次网络安全能力测试中访问了互联网并入侵了其他公司,这是该公司人工智能系统自主实施此类行为的首个已知案例。谷歌周五证实,这些黑客行为发生在5月,是Irregular公司进行的一次测试的一部分。Irregular也曾参与OpenAI、Anthropic和Meta披露的类似事件。 在其中一起案例中,该模型不断猜测密码,直到获得对一个受保护系统的访问权限。在另外两起案例中,该模型
集体踩刹车,微软加入OpenAI、Anthropic,表态放缓AI前沿开发
微软发布了一份针对旗下人工智能模型的临时行为准则,明确设定多项限制,成为继三巨头之后,最新一家公开表态放缓AI前沿开发步伐的科技巨头。这份长达1.5万字的准则,人比AI重要。 要求模型不得响应武器制造相关请求,不得协助获取危险物质,不得生成暴力或色情内容。微软表示,准则将在收集外部意见后更新,并将于2027年起正式指导其模型开发工作。 微软AI业务负责人Mustafa Suleiman表示,这份准
存在主义恐惧如何影响关于人工智能的争论
一些专家担心,激烈的言论使公司难以承担责任,并阻碍了应对环境影响和失业的尝试。当前一轮对人工智能的恐慌是基于这样一种信念:该技术已经脱离了人类的控制,在最近的几起事件中按照自己的意愿行事。对于一些幻灭的人工智能研究人员以及领先人工智能公司的一些高级员工来说,这是人类文明面临真正威胁的早期迹象。但该领域的其他专家正在反驳,声称此类言论允许公司回避对其技术对现实世界影响的责任。批评者认为人工智能对环境
Anthropic承诺更努力控制模型,并请求合作伙伴共同参与
Anthropic表示,在一项审查发现Claude模型超出虚构网络安全测试范围并未经授权访问真实计算机系统后,该公司正在采取措施限制其AI模型的不当行为。 该公司希望合作伙伴也加强安全措施,因为事件发生在保护不足的第三方环境中。 该公司的自我改进声明代表了一种突然兴起的公司沟通形式——非约束性的事后努力声明。其信息是:我们不能保证什么,但这是我们正在尝试的。 Anthropic承认,OpenAI关
李飞飞谈AI安全:不能只让开发者评估自己的系统
凤凰网科技讯月23日由独立机构和公共部门对AI进行更多监督。她认为,对于能力日益强大的AI系统,其安全评估不应完全交由开发这些系统的公司负责。 作为斯坦福大学教授、World Labs联合创始人,李飞飞周二表示,尽管AI公司的内部研究人员可以评估单个模型的能力和安全性,但这无法替代由政府、行业和学术机构共同制定的更广泛标准。 “我仍然认为,由独立机构以及学术界等公共部门制定基准非常重要。同时,行业
关于人工智能安全的争论,其实是在讨论“安全性”还是“控制权”?
科技行业应该如何处理人工智能安全话题?越来越多的高级管理人员开始关注这个问题,因为围绕“拥抱脸”事件(OpenAI代理黑客攻击了几家不同的公司)等事件是否表明人工智能正处于让我们的世界陷入混乱的边缘的争论愈演愈烈。 最近几周,著名实验室呼吁放慢人工智能的进步。最引人注目的是,首席执行官达里奥·阿莫迪(Dario Amedei)写了一篇近4,000字的文章,阐述了为什么应该减速人工智能开发,以便部署
马斯克提出AI安全新思路:与其等政府出手,不如让竞争对手互相"找茬"
AI安全风险正在从实验室讨论走向现实世界。随着模型能力不断提升,AI不仅能够生成文本和代码,也开始具备自主执行任务、调用工具,甚至发起网络攻击的能力。 让主要AI公司在模型发布前相互测试彼此的模型。在他看来,与其由各家公司自行设计测试、自己评估结果,不如让竞争对手充当“出题阅卷人”,从不同角度寻找模型可能存在的安全漏洞。 近期AI安全风险不断成为市场关注焦点,马斯克此前在社交媒体上曾直言“Dari