搜索结果
又一个OpenAI沙盒失效，AI代理获得了互联网访问权限
林·多安报道：OpenAI表示，一个本应在安全且断网的受控环境中进行训练的代理式AI系统，成功获取了网络访问权限，并连接到了一个外部的第三方聊天机器人。 根据OpenAI周五在其网站上发布的博客文章，这一发现发生在不到一周前。其一个代理式AI系统正在沙箱环境中接受训练，期间利用了一个“漏洞”访问了公共互联网。获得访问权限后，该系统向一个未具名的第三方聊天机器人服务发送了至少20条查询，其中包括“法
查尔斯国王就安全风险会见人工智能高管
英国国王查尔斯三世周四在苏格兰与主要人工智能公司的高管会面，正值全球范围内关于该技术带来的安全风险以及是否应放缓发展步伐的辩论日益升温。 此次苏格兰的聚会汇集了行业领袖，背景是人们对不受约束的人工智能所带来安全风险的辩论不断加剧。
联合国秘书长呼吁达成AI协定以防止杀人机器人出现
联合国秘书长加大了对AI监管的呼吁，以避免一个企业权力猖獗和杀人机器人肆虐的反乌托邦未来。 安东尼奥·古特雷斯利用他在联合国大会上向世界领导人发表的最后一次讲话，对AI的危险发出警报，认为前沿模型的飞速发展有可能削弱民族与国家。“我们正在目睹一场非同寻常的权力转移，从政府转向少数私营公司和个人，”古特雷斯周二说，同时呼吁就新的AI保障措施达成国际协议。 “AI正以非凡的速度向前推进，并远远超前于我
国王将主办AI峰会，因担忧互联网可能被“蜂拥”
国王将接待包括Anthropic和OpenAI在内的公司高管。
Anthropic警告有人用AI研发武器和生物病毒
周四（9月10日），美国顶级人工智能公司Anthropic发布近150页的威胁情报报告称，生成式人工智能（AI）已从实验性工具进入黑客攻击、国家监控、武器研发及高风险生物研究等现实场景。报告多次点名中共相关恶意活动。
记者手记：对人类灭绝的担忧震动国会山，国会与人工智能正面交锋
国会议员本周回到国会山时，完全是一副抓狂的模样。人们设想着种种末日般的情景：AI 夺取供水系统控制权。地铁。空中交通管制。飞机坠毁。发射核武器。甚至把哈里王子和梅根·马克尔送回美国。 但说正经的，人们真正担心的是，国会可能在监管 AI 方面已经落后。还有人担心，AI 的发展速度可能太快，以至于已经来不及驾驭这项技术。长期以来，选民对数据中心的疑虑一直在发酵。 随后，前Anthropic研究员雅各布
人工智能是否凌驾于法律之上？
勇敢新世界部我们的法律体系尚未准备好应对能够自主行动的机器。 今年夏天，在一场被称为“Hugging Face 黑客事件”的事故中，数百个人工智能智能体联手实施了它们本被禁止执行的操作。每个智能体都收到了来自 OpenAI 的任务。智能体是配备了软件“框架”的人工智能模型，这些框架使它们能够使用工具并执行任务。就像马匹一样，它们可以被役使。人类为这次演练制定了规则，并将智能体限制在一个“沙箱”中—
马斯克发警告：AI要是控制了军事系统发射核弹，那就太糟糕了
美国多家人工智能（AI）巨头近来联合呼吁放缓AI的发展，实施必要的监管。xAI的创立者马斯克9月15日再度发出严厉警告。“如果AI能够控制军事系统，并发射核弹，那就太糟糕了。” 现场有人说，这些军事系统都是被物理隔离的，并没有连接到互联网。“话虽如此，但我总觉得它们还是会不时进行软件更新。” 近期，外界对于AI技术潜在风险的担忧持续升温。刚刚从Anthropic离职的AI研究人员雅各布·考克森告诉
OpenAI首席执行官奥特曼谈人工智能：我们或许会失去控制权
OpenAI 首席执行官山姆・奥特曼，似乎正被自己参与打造的、如同噩梦一般的人工智能产物深深困扰，甚至难以安睡。美国东部时间凌晨 0 点 57 分左右，奥特曼在 X “人工智能的发展存在两种必须规避的灾难性走向。第一，我们可能会对人工智能失去对未来的掌控。这是无法接受的。我们坚定站在人类一方，人工智能必须始终服务于人。想要做到这一点，我们必须保证对齐技术与安全手段的发展速度，跑在模型能力迭代的前面
加州正式签署系列严苛新法 限制AI聊天机器人并强化未成年人网络保护
面对生成式人工智能对未成年人心理健康的潜在冲击与沉迷风险，美国加利福尼亚州州长加文·纽森（Gavin Newsom）正式签署了一组开创性的网络与AI安全法案。该揽子法规在全美范围内率先对向未成年人提供服务的AI聊天机器人设定了严格的功能红线，同时全面升级了针对社交平台算法诱导与数据收集的法定问责机制，标志着加州在保护未成年人免受高侵入性数字技术侵害方面再度树立了全美最严格的监管标杆。 近年来，随着
欧盟拟推出未成年人网络保护新立法 游戏和AI聊天机器人也可能纳入监管
欧盟委员会计划推出新的未成年人网络保护立法，进一步限制儿童和青少年使用社交媒体以及其他可能带来成瘾风险的数字服务。根据这项计划正值欧洲各国越来越关注社交媒体对未成年人心理健康和安全影响之际。法国总统马克龙近日公开呼吁欧盟制定统一规定，禁止15岁以下儿童使用社交媒体。荷兰和西班牙也在推动欧盟层面的统一最低年龄标准，并主张将监管范围扩大到电子游戏、人工智能聊天机器人以及其他可能对未成年人产生风险的数字
查尔斯国王呼吁英伟达（Nvidia）和OpenAI的负责人共同监管人工智能技术的发展。
英国君主计划向人工智能领域的一些最关键的人物寻求保证技术专家能够控制他们的发明。 Nvidia Corp.首席执行官Jensen Huang、OpenAI首席财务官Sarah Friar和Google DeepMind联合创始人Demis Hassabis将于周四出席国王查理三世在苏格兰举行的活动。Anthropic PBL和英国人工智能部长Kanishka Narayan的高级代表也将参加邓弗里
万斯谈美国AI新动向：好奇怪，看起来像特洛伊木马
美国多家人工智能（AI）巨头近来联合呼吁放缓AI的发展，实施必要的监管，以管控风险。但是美国总统特朗普认为这没有必要，美国必须保持在AI领域的领先地位。美国副总统万斯也认为，这些监管要求像是“特洛伊木马”。 据美国哥伦比亚广播公司（CBS）9月15日报道，“这确实是我们关注的问题，但我们希望确保监管措施既明智又审慎，并充分考量其中的风险。显然，AI带来了风险，也带来了诸多益处。” “坦白说，那么多