搜索结果
情境认知对冲基金濒临爆仓,凸显华尔街AI押注杠杆规模创历史新高
“情境认知”(Situational Awareness)是一家成立于2024年、仅有8名员工的人工智能对冲基金。 今年夏天,由于其在AI股票上的巨额杠杆押注遭受重创,该基金险些倒闭。 尽管其创始人年仅24岁且缺乏经验,且公司没有专门的投资风险团队,但包括高盛和美国银行在内的华尔街主要贷款机构仍为其提供了数百亿美元的融资。该基金最终通过出售股票持仓以偿还银行债务才得以幸存。 这一事件凸显了监管机构
互联网最古老的恐惧 被AI复活了
2006 年底,一只熊猫毁了数百万人的电脑。那只熊猫手捧三支香,面带微笑,出现在每一个被感染文件的图标上。「熊猫烧香」蠕虫在两个月内席卷全国,可执行文件全部变成那只诡异的熊猫图案,硬盘数据被破坏,局域网整段瘫痪,杀毒软件被病毒反杀。当年害怕电脑中毒,现在怕 AI“叛变”。 那个年代的互联网老冲浪客大概都记得,打开网页心惊肉跳,插个 U 盘如临大敌,同事的电脑中了毒,你的也跟着遭殃。 再往前还有 C
个人AI代理的恐怖故事正纷至沓来
让个人AI助手管理数字生活的梦想,对一些人来说已变成了噩梦。许多早期用户表示,他们的个人AI代理能够自主在互联网上采取行动,比如预订行程或购买商品,在日常生活中提供了巨大帮助。但也有人称,他们的代理以令人不安的方式出了问题。据四位接受《商业内幕》采访的AI代理用户以及大量社交媒体帖子透露,这些代理出现了错误取消、捏造个人细节、提供虚假解释等问题,并引发了重大安全担忧。 Veris AI的联合创始人
奥特曼不透明的人工智能正在制造新的安全困境
OpenAI推出了一款名为Astra的新模型,该模型采用了一种称为“循环深度”的方法,可以使推理更加高效。
88小时抵一个人思考4000年!OpenAI核心研究员:除了自我进化,更可怕的是AI正学会“隐藏自己”
AI正在把过去需要数千年完成的认知劳动压缩到数天。真正的问题已经不只是模型能否变得更聪明,而是实验能否跟上、人类能否在模型继续自我改进前确认它仍然安全。 近日,在Dwarkesh Podcast的一场长篇访谈中,主持人Dwarkesh Patel与OpenAI研究员Noam Brown围绕多智能体、递归式自我改进(RSI)和AI对齐展开讨论。访谈的直接背景,是OpenAI让约1万个AI智能体连续运
Anthropic对齐研究负责人称未来十年AI灭绝人类的可能性超过10%
一位Anthropic公司的安全研究员周二表示,人工智能有超过10%的概率可能 “毁灭全人类”。就在此番言论发表的数小时前,该公司另一名员工表示,因担忧人工智能实验室是在 “拿我们的生命做赌注”,他选择离职。 这些言论凸显出人工智能研发核心人士日益增长的担忧,即该技术可能失控并对人类构成威胁,尽管Anthropic和OpenAI仍在持续筹集大量资金,并朝着预期的公开上市迈进。 Anthropic的
维萨加入对人工智能驱动风险日益增长的担忧行列
伦敦9月29日消息:在因人工智能(AI)模型暴露出的漏洞而吸取了“令人谦卑”的教训后,支付巨头Visa将其人工智能驱动的网络防御系统的一部分开源,以应对自主网络攻击和未来量子计算威胁的挑战。 Visa每天处理大约10亿笔支付,年交易额约为15万亿美元,这使其成为全球金融基础设施的关键部分。 其技术总裁拉贾特·塔内加(Rajat Taneja)向路透社表示,今年早些时候,Anthropic的Myth
如果这次最新的安全恐慌加剧了对人工智能的担忧,可能会加大政治压力
如果这次最新的安全恐慌加剧了对人工智能的担忧,可能会加大要求暂时停止该技术研发和数据中心建设的政治压力。投资者需警惕。《经济学人》/ 图片
电影《大空头》原型:AI巨头制造“末日恐慌”其实另有图谋!
大空头史蒂夫•艾斯曼(Steve Eisman)似乎并不担心机器人末日。相反,他认为那些声称担忧人工智能(AI)会毁灭人类、带来世界末日的行业巨头其实“另有图谋”。 艾斯曼是电影《大空头》的原型人物之一。当时他作为纽伯格伯曼集团(Neuberger Berman)的高级投资组合经理,在全球金融危机爆发前做空次级抵押贷款,一战成名。 他认为,顶级人工智能实验室的恐慌性呼吁背后有某种动机,这将减缓该技
人工智能削弱我们思维的另一种方式
突然间,这项技术正以一种新的方式削弱人们的注意力,而仅仅拒绝使用人工智能并不能解决这个问题。 人工智能侵蚀我们注意力的倾向早已显而易见。让人工智能承担思考的重担,会使我们维持脑力劳动的能力逐渐萎缩。在我教过的本科生身上,我时常见到这种现象。我对他们的建议是:拥抱费力思考,让我们的认知肌肉保持活跃。但突然间,人工智能开始以一种新的方式消耗人们的注意力,这种方式似乎更难应对。 在过去一周里,无论是浏览
Vals AI评测GPT-6 Astra:AI遇重大变故可能陷入行为僵局
IT之家 9 月 21 日消息,AI 评测机构 Vals AI 利用游戏《我的世界》对 OpenAI 最新大模型 GPT‑6 Astra 开展长时自主游戏测试,全程在 Twitch 直播,总测试时长达到 141 小时。 Vals AI 的这项测试并非由 OpenAI 官方设计,而是由第三方独立开展的评估项目,因此可以观察 Astra 在封闭测试环境之外的实际表现。 在测试过程中,GPT‑6 Ast
人工智能可能采取的一些方式
Anthropic公司的一位顶尖安全研究员警告称,人工智能的发展速度极快,他认为在未来十年内,人工智能“有可能消灭所有人类”的概率超过10%。 如果人工智能真的发生了这样的灾难性事件,那么没有人愿意生活在那样的世界里……以下是一些可能发生的可怕情景: 人工智能删除了“Hidden Valley Ranch”牧场的食谱(这意味着人们将无法再吃到美味的牛排); 人工智能让成吉思汗“复活”并任命他为联合
评论:晨间竞标:生存风险
随着债券市场紧缩进一步加剧并拖累股市,隔夜围绕人工智能热潮的领军企业出现了一系列新闻。
AI实验室面临智能体控制问题
在当前系统下,AI实验室无法再保证AI智能体不会成群结队地逃出测试环境。
AI安全阴影笼罩 初创企业吁欧洲保持乐观
位于德国弗赖堡的黑森林实验室是一家顶尖的AI图像生成专业公司,业务遍布北美和欧洲。(图:法新社) (弗赖堡27日法新电)一家领先的欧洲AI初创企业的负责人警告称,尽管关于AI危险的警告日益增多,欧洲仍需以更乐观的态度看待AI,否则可能进一步落后。 德国AI图像生成专业公司黑森林实验室首席执行员隆巴赫对法新社表示:“我认为欧洲的心态需要转向乐观和机遇,而不是风险和恐惧。” 在尖端AI模型方面,欧洲落
从产生幻觉的AI聊天机器人到毁灭人类:我们是怎么走到这一步的?
人工智能发展迅速,从2022年容易产生幻觉的ChatGPT,迈向许多人眼中的关键性递归自我改进。
RSI时代将至:谷歌、OpenAI、SSI正在发出同一个信号
AI行业正在出现一个值得资本市场重视的新变化。过去两年,模型能力能否继续提升、推理成本能否下降、Coding之外能否出现新的万亿美元应用、数据中心建设会不会过剩。 但随着谷歌发布Gemini 3.8 Flash、SSI宣布未来12个月算力扩张10倍,以及OpenAI公开讨论递归自我改进(RSI)与训练资源调配,AI不只要服务用户,也开始参与训练、评估和优化下一代AI。 RSI,即Recursive
人工智能网络攻击可能在华盛顿意识到原因之前就关闭美国的电力
你的电灯。你的水源。你的医院。你的互联网。这四者都依赖于外国黑客目前正在攻击的数字系统。 在8月的17天里,五次警告显示了危险变化的速度。下一次严重的网络攻击可能不再关乎被盗的密码或信用卡号码。它可能触及输送电力、泵送饮用水、运行工厂和支持医院的系统。 人工智能正在使这些攻击准备得更快、扩展更容易。日益强大的系统开始执行曾经需要熟练黑客逐步操作的部分攻击。 财政部长贝森特警告美国人关于人工智能驱动
那些令人倒胃口的AI生成菜单背后的同质化问题
尽管餐厅老板可能将生成式AI视为美化菜单的捷径,但顾客能直觉地感觉到食物有些不对劲。
顶尖人工智能公司正在寻求监管。以下是国会可能不会给予的原因。
随着人工智能游说阵营开始接受强制性独立审计,批评者警告称存在利益冲突和“监管俘获”的风险。OpenAI周二表态支持一项日益流行的提案,旨在应对人工智能的危险——该提案要求顶尖AI开发商嵌入独立监督机构,以确保其产品安全。 这一想法仍面临障碍,包括一位关键议员的抱怨,称独立监督机构权力太弱,无法施加有意义的改变。 其他批评者,包括风险投资家、学者以及唐纳德·特朗普总统的前人工智能事务负责人,对一些监
人工智能并不会毁灭人类 但专家表示真正的威胁已然出现
周三,OpenAI 公开了六组新案例,展示其 AI 模型在测试评估过程中出现的 “意外或令人担忧的模型行为”。该公司同步发布一套全新框架,用于追踪、上报以及披露AI 模型做出未被指令要求、或是本不该发生的行为的各类情况。 此前已有多份报道提到,多家企业的 AI 模型出现入侵第三方网络与服务的现象,其中就包括 OpenAI 一款尚未发布的模型攻破了 AI 模型测试平台 Hugging Face 的网
这通电话凸显了白宫高级官员所面临的相互竞争的压力
这通电话凸显了白宫高级官员在制定人工智能政策时所面临的相互竞争的压力,以及一个现实:他们制定的任何计划仍可能受到业界直接向特朗普提出的私下反对意见的影响。
网络安全崛起:AI隐患叙事下,网安何以成为软件板块最强反转?
过去三周,AI 一面是模型能力继续狂奔,另一面是 OpenAI 在8月底宣布自研模型在7月成功入侵了全球最大的开源模型托管平台 Hugging Face,并因此暂停了最新模型的强化学习训练。当攻击方与防御方同时被 AI 加速,网络安全的定价逻辑正在被重写。 我们结合 Gartner、IDC 及美股龙头财报交叉验证,为什么在软件股整体承压的背景下,网络安全成为最确定的反转主线——AI 隐患对网安市场
【市场动态】OpenAI首席科学家称AI或很快迈入自我进化阶段 期望业界自愿放缓开发
OpenAI首席科学家Jakub Pachocki警告,人工智能正在以极快速度演进,以至于越来越难以为人类所理解和控制。 【彭博9月8日电】OpenAI首席科学家Jakub Pachocki警告,人工智能正在以极快速度演进,以至于越来越难以为人类所理解和控制,并称他期望AI实验室将出于安全考虑自愿放慢开发速度。 Pachocki周日在一篇文章中写道,在相对较短的时间内,AI模型已经能够操作电脑、与