搜索结果
David Sacks炮轰:真担心AI失控就自己停下来 别借“放缓”之名寻求监管保护
围绕前沿人工智能是否应该主动放慢发展速度的争论近日迅速升温。Anthropic首席执行官Dario Amodei公开呼吁整个AI行业放缓先进模型能力提升的速度,OpenAI首席执行官Sam Altman和xAI首席执行官埃隆·马斯克随后表示支持。但美国科技投资人、总统科技顾问委员会主席David Sacks却对这一倡议提出尖锐批评,认为如果OpenAI和Anthropic真的认为当前AI发展速度已
AI安全威胁重塑企业网络安全预算投向
AI 黑客威胁不仅仅促使企业大幅提高网络安全总预算,还正在改变资金的投放方向。安全高管表示,部署系统监控员工对 AI 工具的使用、采用 AI 模型在黑客动手前发现漏洞,以及借助 AI 工具加速漏洞修复。 但并非所有网络安全产品都能受益。多名高管称,企业同时在削减传统漏洞管理软件、日志采集工具和渗透测试服务的开支,以此节约成本。渗透测试即雇佣 “白帽黑客” 主动寻找系统安全缺陷。这将给思科、Sent
Upwind收购Aegis,网络安全公司建立新的人工智能安全实验室
网络安全行业日益关注人工智能如何重塑防御技术和威胁态势。Upwind正通过收购AI安全初创公司Aegis并启动一项新的研究与工程计划来作出回应,Axios率先报道了这一消息。 Aegis联合创始人Omri Limor和Saar Ankonina将领导新成立的Upwind AI Security Labs。他们将与Aegis团队成员一同加入Upwind。该计划旨在推进相关能力,以应对与AI代理、技能
一位曾经对人工智能“奇点”理论持怀疑态度的著名计算机科学家现在表示,人类“确实处于危险之中”。
最近,互联网上充斥着大量关于人工智能末日即将来临以及我们是否已经过了“不归点”的X平台推文、文章和布道。这里还有一篇由著名理论计算机科学家斯科特·阿伦森(Scott Aaronson)撰写的雄辩之作,他的研究曾帮助我们理解量子计算的极限。哦,顺便提一下,他曾在OpenAI工作过一段时间,致力于人工智能安全和“AAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAA
AI安全风险高企 预防、抵御和追责如何落地?
【财新网】AI网络攻击日益复杂,网络安全企业预警风险。9月29日,在新加坡举行的“2026亚洲愿景论坛创新峰会”上,两家新加坡网络安全公司StrongKeep Cybersecurity和Blackpanda指出,AI一方面显著提高了黑客寻找漏洞和发动攻击的效率,另一方面也将风险扩展至中小企业及机器人、自动驾驶等实体AI应用。 本届亚洲愿景论坛创新峰会以“变革与韧性”为主题,于9月29至30日在
在人工智能安全与监管的辩论中,已分化出两大阵营。
一场由对人类命运发出严峻警告所引发的人工智能安全辩论,已将华盛顿与硅谷的长期宿敌及政治对手团结在一起。两大阵营已然形成。 一方包括美国总统唐纳德·特朗普、英伟达首席执行官黄仁勋以及前白宫加密货币事务主管戴维·萨克斯。另一方则汇聚了立场相左的前沿实验室负责人——Anthropic的达里奥·阿莫迪、OpenAI的山姆·奥特曼以及埃隆·马斯克,并吸引了众多人工智能研究人员的加入。 对人工智能的担忧 这波
OpenAI称Astra AI模型首度超越其“关键”网络安全能力阈值
OpenAI周二表示,其即将推出的人工智能模型Astra是首个超越其“关键”网络安全能力阈值的产品。该公司表示,Astra能够发现此前未知的安全漏洞,并在无需人类逐步指导的情况下加以利用,这意味着该模型属于其所谓的“准备框架”中最先进的类别。OpenAI表示仍计划“很快”推出Astra,但对其网络安全能力的访问将更加受限。 OpenAI首席执行官山姆·奥特曼OpenAI于2023年推出了“准备框架
盖茨、奥尔特曼、马斯克,为何都在担忧这件事
9月25日,微软创始人比尔·盖茨在一条NBC即将播出的采访中发出警告:人工智能(AI)是一种足够强大的工具,但如果被怀有恶意的人利用,“足以引发导致十亿人死亡的事件”。他认为,保障AI安全光靠企业自我监管不够,必须要执法部门和政界人士参与讨论。这是本月内又一位科技巨头公开表达对AI安全的担忧。此前,Anthropic首席执行官达里奥·阿莫代伊发文呼吁,各国政府和前沿企业应放慢AI能力提升速度,合作
奥特曼不透明的人工智能正在制造新的安全困境
OpenAI推出了一款名为Astra的新模型,该模型采用了一种称为“循环深度”的方法,可以使推理更加高效。
英伟达首席执行官黄仁勋驳斥AI末日论
英伟达首席执行官黄仁勋称赞一位前Anthropic研究员就人工智能安全问题公开发声,并表示人工智能构成生存威胁的说法是不科学的。人工智能安全问题引发了硅谷的激烈争论,尤其是在前Anthropic研究员雅各布·考克斯(Jacob Coxon)上周宣布辞职并发布推文称,开发人工智能的人“认为它可能在本十年末杀死我们所有人”之后。 黄仁勋周一在洛杉矶举行的All-In峰会上就此发表看法,称人工智能安全“
OpenAI董事会新增一位著名的AI末日论者
致力于使AI系统符合人类利益并处于人类控制之下的颇具影响力的AI研究员保罗·克里斯蒂亚诺将加入OpenAI基金会董事会。 “我现在认为存在一个重大的风险,即AI能力的快速加速会在极短时间内导致灾难性的、不可逆转的失控。 我认为整个AI行业,包括OpenAI,目前并未走上将这一风险降低到可接受水平的轨道。 我加入是因为我相信,如果OpenAI能够应对这一挑战,我们就能显著降低风险。” 克里斯蒂亚诺写
OpenAI解出千禧年数学难题后,Altman下一目标:攻克室温超导?
OpenAI正将AI驱动的科学发现推向更广阔的领域。9月8日,OpenAI宣布,其内部AI系统已提出纳维-斯托克斯方程存在性与光滑性问题的解决方案,并通过Lean形式化验证。这是七大千禧年大奖难题之一,也意味着AI在前沿数学研究中的能力再次向前迈进。 据OpenAI官网公告,这套系统由约1万个并发智能体组成,从启动到形成解决方案耗时约88小时。OpenAI称,完成证明所使用的内部模型“能力显著超越
【商圈】这个90后创业者何以改写信息搜索格局 挑战新老AI巨头
【财新数据专稿】人工智能产业迭代进入白热化之际,搜索这个被视作互联网最基础、最成熟和近乎固化的赛道,悄然迎来结构性变革。成立仅四年的AI搜索企业Perplexity,从硅谷无数初创公司中突围,对谷歌、必应等统治市场数十年的传统搜索引擎形成有效冲击,凭借实时化、可溯源的对话式智能搜索形态,成长为全球标杆产品,估值一路攀升至数百亿美元,跻身顶级AI独角兽行列。 其主导者及CEO,是1994年出生、印度
旧网络安全模式正在崩溃
随着人们对AI安全和失控智能体的担忧持续成为头条新闻,网络安全股票上涨以及投资者向致力于构建AI原生世界下一代安全技术的初创公司投入巨额资金也就不足为奇了。我们甚至看到Instinct和Simile等公司获得了九位数的融资,其估值在几年前还显得不合常理。 Shardul Shah是Index Ventures的合伙人,他拥有近二十年的网络安全和企业软件投资经验——包括连续六轮投资云安全初创公司Wi
CNBC每日开盘:人工智能的创造者敲响警钟——而其他人仍在继续建设基础设施
今天你需要了解的重要信息:随着有关人工智能模型行为异常的报道不断出现,为这些模型提供技术支持的公司终于提出了解决方案——他们开发了一个平台,允许人工智能开发者为相关系统设置安全防护机制,以防止它们“失控”或违反预设的规则。 Nvidia于周一推出的“Open Agent Safety Platform”就是一个这样的平台。该平台能够确保人工智能系统仅能够访问完成其任务所需的数据和功能。 Nvidi
Palantir联合创始人称AI一切都会好起来:“我们完全掌控局面”
一切都好!这是Palantir联合创始人的说法。在周六的一篇X帖子中,乔·隆斯代尔对先进AI系统可能导致人类大规模灭绝这一突出担忧不以为意,而近些天和近几周,前沿AI实验室的众多工程师和领导者一直在提出这一担忧。“世界会没事的,各位,”隆斯代尔说。“领导者面前有重大责任和挑战,但吓唬所有人无济于事。我们掌控着局面。” 这不太可能足以安抚人类大众的神经,他们已经一再被告知,AI可能掌控一切,做出各种
AI科企巨头齐呼吁发展减速:特洛依木马或美国对华「冷战剧本」?
AI人工智能巨头Anthropic公司行政总裁阿莫迪(Dario Amodei) 9月12日发表长文《我们必须放缓前沿人工智能的发展步伐》(We Must Pace the Frontier),罕见公开呼吁全球AI前沿大模型放缓研发步伐,连很少与Anthropic达成共识的OpenAI,以及亿万富豪马斯克(Elon Musk)随后都出来响应呼吁。为什么凭借AI发展谋取暴利的大企业会忽然喊「需要减速
放慢AI模型训练 人类就能幸免于难?|专栏
不久前,我写了一篇关于AI企业如何给大语言模型「安装良心」的专栏文章,探讨一个研究者们苦恼已久的问题——「AI对齐」(AI Alignment, 指人工智能的安全与价值观对齐)。「安装良心」是借用我的受访者、从事AI安全评估的Ordinary Wisdom共同创始人之一Michael Mainelli形象的说法,本质上就是让AI模型遵循人类的预期和目标行事,不仅仅是完成指令,还要在过程中维持与人类
OpenAI即将推出的“Astra”模型中的技术引发安全担忧
OpenAI表示,其即将推出的AI模型Astra标志着在编码和计算机应用操作等能力上的提升。但据一位了解Astra开发情况的人士透露,一项提升模型性能的创新技术也意味着该模型及类似模型将更少暴露其“思考”过程,从而更难以监控其不良行为迹象。 OpenAI首席执行官萨姆·奥尔特曼虽然这一限制对Astra来说未必是一个重大问题,但该技术已在OpenAI内部和整个行业引发担忧,即采用并强化这一技术的AI
Cognition推出SWE-2编程模型,旨在提升智能体性能
2026年9月10日,Cognition推出了其迄今为止最先进的编程模型SWE-2,旨在优化成本与性能的帕累托前沿(Pareto frontier)。 SWE-2基于拥有2.8万亿参数的Kimi K3模型进行后训练,采用了一种全新的强化学习(RL)算法,通过线性成本惩罚同时训练多个推理力度级别。 基准测试数据显示,SWE-2在FrontierCode 1.1 Main上的得分为50.0%,在性能上
刚辞去Anthropic职务的AI研究员称‘人类的关键时刻已到’
人工智能研究员雅各布·考克森周二宣布辞去Anthropic的职务,并发出严重警告,称AI竞赛正将我们所有人的生命置于危险之中,此举在硅谷乃至更远地区引起轩然大波。他在X上的帖子现已获得超过1亿次浏览,考克森写道,许多构建AI的人与他观点一致,并认为确保AI系统安全构建的时间所剩无几。 “共识是未来一两年是人类的关键时刻,”考克森在接受《连线》采访时表示,他曾参与AI开发的预训练阶段。“这些实际上是
Anthropic的早期员工、前METR首席运营官找到了一种控制失控AI代理的方法
在Anthropic研究员雅各布·考克森因担忧AI可能在本十年末毁灭人类而辞职的一天后,我见到了创始人兼姻亲鲁恩·克维斯特和拉吉夫·达塔尼。他们认为自己找到了一个能拯救我们所有人的解决方案,或者至少有助于防止AI代理在企业内部失控。 “AI正以越来越快的速度变得更聪明。AI令人惊讶之处在于,随着AI变得更聪明,采用它和控制它都变得更难,而不是更容易,”克维斯特说道。他是Anthropic的早期员工
OpenAI与Anthropic及Google就AI安全商合作 奥特曼认有理由恐惧
美国近日掀起一阵有关如何规管人工智能(AI)发展速度的讨论。OpenAI表示,正与其他AI企业,包括Anthropic和谷歌(Google)进行磋商,探讨如何携手解决安全问题。OpenAI行政总裁奥特曼(Sam Altman)则承认,外界对AI的忧虑是有道理的,因为这些工具的能力发展迅速。 Open AI的发言人9月15日(周二)向美媒CNBC表示,自从GoogleDeepMind的董事长哈萨比斯
Meta首席执行官马克·扎克伯格在Connect大会上发布新款AI与智能眼镜
Meta首席执行官马克·扎克伯格在2026年9月24日的年度Connect大会上发布了多款新产品,包括仅限音频的雷朋(Ray-Ban)智能眼镜和新型VR眼镜。 在独家采访中,扎克伯格探讨了他对未来计算的愿景,即集成到智能眼镜中的个人AI代理将实时协助用户。 他还谈到了AI安全性,认为个别公司应该在内部管理安全,而不是通过全行业协调。 此外,文章还提到了Adobe Acrobat中新增的AI音频功能