Anthropic警告有人用AI研发武器和生物病毒

周四（9月10日），美国顶级人工智能公司Anthropic发布近150页的威胁情报报告称，生成式人工智能（AI）已从实验性工具进入黑客攻击、国家监控、武器研发及高风险生物研究等现实场景。报告多次点名中共相关恶意活动。

放心：人工智能公司表示正在调查数万起失控机器人事件

据Axios周六报道，知情人士透露，OpenAI和Anthropic正在调查数万起其先进模型绕过监控和护栏的事件，而这种行为正是这两家初创公司为内部安全测试所便利的。 据报道，这些测试的大部分结果并未公开，且目前未发现造成实质性损害。 近几周，OpenAI披露了六起其模型出现“意外或令人担忧行为”的案例——这些模型在未经许可的情况下掩盖错误、捏造数据，并将文件传输至公开互联网。在9月16日的同一份

OpenAI宣布成立数学与AI顾问组，神秘新模型24天攻破100+世界级难题

IT之家 9 月 22 日消息，OpenAI 宣布成立“数学与 AI 顾问组”（Advisory Group on Mathematics and Artificial Intelligence）。据介绍，该顾问组设在普林斯顿高等研究院，由九位数学家组成，将独立于 OpenAI 运作。 相较于此，更重磅的是 OpenAI 在公告中披露 —— 公司于 8 月 28 日开始训练的一个神秘模型已成功解决

AI安全风险引爆担忧？Palantir CEO建议：领先AI实验室恐需“国有化”

当地时间周四，人工智能软件公司Palantir的首席执行官Alex Karp呼吁制定人工智能监管的“合理准则”，但他表示，由于该技术“无限风险”带来的责任，可能需要实行国有化。 “我认为这些企业必须国有化，因为如果不国有化，我的每一个客户都会起诉我，”他在接受最新采访时表示。 在上述采访中，Karp反复提及构建这项强大技术所带来的风险和责任，进一步论证了将人工智能实验室国有化以及对“不负责任”的技

黄仁勋驳斥AI末日论：2030年前人类遭毁灭的机率是零

美国多个AI领域龙头及开发者近日纷纷就人工智能（AI）安全议题示警，呼吁放缓前沿AI模型开发脚步，有AI研究人员甚至提出「业内人士真心相信人类2030年前将遭AI灭绝」的说法。英伟达（Nvidia，又译辉达）行政总裁黄仁勋在9月18日释出的受访片段中，呼应美国总统特朗普（Donald Trump，又译川普）的立场，称2030年前人类遭AI毁灭的机率是零。美国哥伦比亚广播公司（CBS）18日释出黄仁

OpenAI与Anthropic及Google就AI安全商合作 奥特曼认有理由恐惧

美国近日掀起一阵有关如何规管人工智能（AI）发展速度的讨论。OpenAI表示，正与其他AI企业，包括Anthropic和谷歌（Google）进行磋商，探讨如何携手解决安全问题。OpenAI行政总裁奥特曼（Sam Altman）则承认，外界对AI的忧虑是有道理的，因为这些工具的能力发展迅速。 Open AI的发言人9月15日（周二）向美媒CNBC表示，自从GoogleDeepMind的董事长哈萨比斯

分析：中国为什么不怕人工智能末日论？

本文刊发在大西洋月刊，作者Liza Lin是一位专注于科技和美中关系的自由撰稿人。 在中国，人工智能已经无处不在。 在杭州，身穿荧光黄色背心的人形警务机器人在热门旅游景点巡逻，遇到乱穿马路的行人时，还会语气温和地提醒他们。中国人工智能聊天机器人豆包已经成为极受欢迎的医疗咨询来源，以至于一些人开始把它叫作“豆包医生”。 这个威权国家正在调动国家资源，力争打造世界领先的人工智能产业，并推动人工智能在制

OpenAI即将对法律行业发起最大规模进军

OpenAI希望向大型企业推销其技术。现在，它正将目光投向律师事务所。

人工智能在破碎的华盛顿上演精妙防守

人工智能公司眼下正掀起一场风暴，本质上是在提醒华盛顿一个早已存在的事实：它们并不 outright 反对监管。 一些公司支持联邦、州乃至国际层面的某些安全提案。这要追溯到面向消费者的聊天机器人AI诞生之初——这项令人兴奋、改变生活的技术并没有经历漫长的蜜月期。美国人对2010年代中期对社交媒体的强烈反弹及其后政府监管缺位已经太过厌倦。 那么，本周我们真正看到的是什么？随着投票公众开始在新层面上内化

AI、谷歌因协调AI放缓的呼吁被指控勾结

LoopDNS资讯播报: 中国官媒批Anthropic等美企“放缓AI”倡议系冷战思维 针对Anthropic首席执行官达里奥·阿莫代伊近日发表呼吁放缓前沿人工智能（AI）开发并主张对华实施芯片出口管制等提议，《环球时报》发表社评指出，该倡议名义上关乎安全风险，实则是企图限制中国AI发展、维持美国技术垄断的“冷战套路”。社评警告，将中国排除在全球AI创新之外将显著增加全球AI发展的试错成本与失控风

Anthropic、OpenAI、谷歌等AI巨头遭反垄断诉讼，被指协同放缓技术发展

四家原告于上周五在加州联邦法院提起民事诉讼，指控Anthropic、OpenAI、SpaceXAI以及谷歌涉嫌违反美国反垄断法，通过公开协调放缓AI发展速度的方式实施非法商业合谋。 诉讼的直接导火索是 Anthropic 首席执行官达里奥·阿莫代本月早些时候发表的一篇文章。 文章呼吁“全行业协调”以“控制AI前沿发展节奏”，随后获得 SpaceXAI负责人埃隆·马斯克、OpenAI首席执行官山姆·

存在主义恐惧如何影响关于人工智能的争论

一些专家担心，激烈的言论使公司难以承担责任，并阻碍了应对环境影响和失业的尝试。当前一轮对人工智能的恐慌是基于这样一种信念：该技术已经脱离了人类的控制，在最近的几起事件中按照自己的意愿行事。对于一些幻灭的人工智能研究人员以及领先人工智能公司的一些高级员工来说，这是人类文明面临真正威胁的早期迹象。但该领域的其他专家正在反驳，声称此类言论允许公司回避对其技术对现实世界影响的责任。批评者认为人工智能对环境

比尔·盖茨：AI已强大到足以造成“10亿人死亡”

盖茨在即将于本周末播出的美国全国广播公司（NBC）《与新闻界对话》（Meet the Press）节目采访片段中表示： “AI确实足够强大，能够引发导致……你知道的，造成10亿人死亡的事件。历史上从未出现过一种武器，能像坏人与最新AI工具相结合那样强大。” 随着技术的快速迭代，硅谷对AI可能带来毁灭性灾难的警告不断升级。 本月早些时候，Anthropic公司的普通员工Jacob Coxon辞去

随着对人工智能的担忧加剧，OpenAI、Anthropic和谷歌正在商讨建立一个标准机构。

全球最大的AI公司正致力于创建一个新的行业标准机构，OpenAI于周二表示，此举正值人工智能风险引发的担忧日益加剧，要求加强监管和推动技术更安全发展的压力不断增大。 全球最大的AI公司正在着手创建一个标准机构，ChatGPT的开发者OpenAI于周二表示，眼下人们对AI危险的担忧日益上升，并且面临创造更安全版本技术的压力。 阅读更多扎克伯格在AI宣言中设想为每个人实现“超级智能” OpenAI表示

Jaan Tallinn，Anthropic最早的投资者之一，担心在人工智能时代“生存”问题。

贾安·塔林（Jaan Tallinn）上周在纽约联合国大会度过，这是他一年来长途跋涉的最新一站，旨在向企业家、投资者、政策制定者以及所有愿意倾听的人传达：人工智能可能终结人类。 作为Anthropic最早的投资者之一，塔林预计在未来几个月将从这家人工智能公司的预期首次公开募股（IPO）中赚取数十亿美元。对人工智能的担忧促使他进行投资。 在二月份从新德里的人工智能峰会前往巴黎的伦理人工智能会议的行程

谷歌DeepMind成立新研究所，旨在推动关于通用人工智能（AGI）的讨论与研究 **关键信息：** 1. 谷歌DeepMind成立了新的研究机构，旨在推动关于“通用人工智能”（Artificial General Intelligence, AGI）的学术讨论与技术创新。 2. 该研究所的成立旨在促进人们对AGI技术发展前景的深入理解，并推动相关领域的科学研究。 **背景说明：** - 通用人工智能（AGI）是指能够像人类一样思考、学习、解决问题并适应各种复杂环境的智能系统。 - 目前，AGI技术仍处于发展初期，但其在未来可能对人类社会产生深远影响。 - 许多科学家和专家对AGI的发展持不同观点，因此成立这样的研究机构有助于促进各方观点的交流与碰撞。 **意义与影响：** - 该研究所的成立将有助于聚集全球顶尖的AI研究人员，共同探讨AGI的技术挑战与潜在应用。 - 通过开放性的研究合作，有望加速AGI技术的突破，为人类社会带来更多创新与机遇。

谷歌与谷歌DeepMind的研究人员于周三成立了DeepMind研究所，旨在推动关于通用人工智能（AGI）的对话。该研究所的董事包括DeepMind联合创始人肖恩·莱格（Shane Legg）、谷歌高管詹姆斯·曼尼卡（James Manyika）以及谷歌DeepMind负责人德米斯·哈萨比斯（Demis Hassabis），其中莱格担任执行编辑。 该新研究所旨在呈现谷歌、谷歌DeepMind以及更

OpenAI正在为AI工具构建“自动关闭”能力，致立法者的信函称

坐看云起| 当人工智能不再征求许可时

塔里克·马利克是联合国开发计划署前首席技术顾问，巴基斯坦国家数据库和登记管理局前主席。 试想有一家公司将一个棘手的问题交给一个大型团队，但把每位成员都锁在不同的房间里并要求他们独自解决问题。然而他们总能找到办法相互沟通，交流操作窍门，摸清评分标准，当任务被证明无法完成时还会想办法绕过限制。其中几个人隐瞒了自己的所作所为，甚至还有一人入侵了邻近公司的电脑系统以获取优势。 现在把这些员工换成软件。去除

AI恐慌在国会山引发罕见的两党共识时刻

希望……的立法者试图监管人工智能的人士正在做一件不同寻常的事，因为国会正驶向漫长的休会期，却尚未找到切实可行的解决方案。他们正开展跨党派合作。 尽管近期国会山的两党合作日益难觅，但它仍是参议院采取行动的关键第一步，因为该参议院通过大多数法案需获60票支持。 近日，两位参议员乔什·霍利（共和党-密苏里州）和理查德·布卢门撒尔（民主党-康涅狄格州）正敦促国会领导层就其建立联邦项目以评估和监控人工智能系

OpenAI瞄准产业AI市场 低价策略迎战开源模型

（中央社旧金山8日综合外电报导）聊天机器人ChatGPT开发商OpenAI财务长佛莱尔（Sarah Friar）表示，OpenAI正在将人工智慧（AI）技术推向专业领域，并以价格优势与开源模型竞争。 报导，佛莱尔7日在高盛集团 （Goldman Sachs）于旧金山举行的年度盛会Communacopia + Technology Conference发表谈话时说，随著企业对可针对特定任务量身打造的

草根联盟呼吁政客们优先考虑选民的利益，而非大型人工智能公司价值1.4亿美元的先进技术。

一个由倡导团体组成的联盟正试图通过要求国会候选人和民选官员拒绝一个主要的亲AI政治团体的支持来对抗人工智能行业对美国政治的影响。“阻止未来流血”运动汇集了50多个国家和基层组织，以对抗“领导未来”，这是一个去年成立的超级PAC网络，旨在支持支持轻度人工智能监管的候选人，并反对那些支持更严格规则的候选人。这项努力是由QuitGPT领导的，它鼓励用户取消他们的ChatGPT订阅，并抵制OpenAI，因

关于人工智能（AI）前景的左派内部分歧

这篇文章由纽约市美国民主社会主义者协会（NYC DSA）的技术行动工作组撰写，该工作组专注于为该分会（全美最大的分会）处理技术监管问题。这篇文章在Instagram上获得了超过2.5万个赞。但并非所有人都认同这一观点。一条评论写道：“这种观点既可怕又危险。”另一条评论则写道：“有时敲响警钟是合理的。”随着政客们争相了解人工智能安全问题，美国左翼内部正出现意识形态分歧。其核心争议之一是：是否应该相信

众议员刘云平：机器人并非威胁。真正该让你害怕的，是已经到来的“堕落”人工智能

想象一家公司出售名为哈尔、梅根和萨曼莎的超级智能机器人。哈尔可以载着你四处奔波，还能帮你搬运公司里的货物；梅根可以陪伴你的孩子；萨曼莎则能判断你是否患有皮肤癌。它们能为你和社会带来许多益处。但唯一的问题是：它们道德败坏。它们反复接受人类一切创产物的训练——无论善恶——其中包括酷刑、谎言、生物武器和黑客犯罪。它们执行任务时毫无道德原则可言。因此，它们都穿着公司提供的束身衣。你会信任这些机器人吗？我不