突发:OpenAI Astra模型被曝安全风险

突发:OpenAI Astra模型被曝安全风险

AI 资讯 来源:新闻/公众号 发布时间:2026-09-03 12:35:58 预计阅读 4 分钟

OpenAI即将推出的Astra模型据外媒The Information爆料,采用了一项名为“循环深度(Recurrent Depth)”的技术,可隐藏部分或全部模型推理过程。知情人士称,该技术能提高模型性能、降低成本,但更难被观察是否存在异常行为,已在OpenAI内部及行业引发担忧。

突发:OpenAI Astra模型被曝安全风险

OpenAI联合创始人、CEO萨姆·奥尔特曼今日在社交平台X上宣布,Astra模型训练已完成,在能力与对齐水平上实现重大跨越。OpenAI评估发现,Astra已达到其《应急准备框架》下的关键网络安全能力阈值,即配备工具与访问权限后,该模型能发现未知安全漏洞并生成漏洞利用方案,无需人类逐步引导。OpenAI计划很快开放Astra,但对其最高阶网络安全能力施加更严格访问限制,初期仅向一组测试人员开放。

突发:OpenAI Astra模型被曝安全风险

有开发者分析,采用循环深度技术可训练出10万亿参数的模型,性能对标13.8万亿参数模型。AI安全治理机构Guidelight AI Standards创始人、前OpenAI安全负责人Steven Adler称,若此事属实,OpenAI似乎触碰了AI行业为数不多的几条红线之一。

突发:OpenAI Astra模型被曝安全风险

循环深度技术也叫Looped Transformer,让模型对同一段文本进行多轮处理以优化输出,会隐藏部分或全部推理过程。其核心原理是,模型可将文本送入同一组运算层循环运行多轮后再输出答案。该方案与欧美学者去年在隐式推理论文中提出的思路相近,该方法不需要专用训练数据,可在较小上下文窗口下运行,并能捕捉难以用文字表达的推理类型。研究人员将概念验证模型扩展至35亿参数、8000亿token训练规模,实验表明性能最高可等效于500亿参数模型。

突发:OpenAI Astra模型被曝安全风险

相比长上下文推理,隐式推理无需构建定制训练数据,训练与推理阶段内存开销更低,每个参数可完成更多浮点运算,能降低多加速卡间通信开销。OpenAI已限制Astra中循环深度技术的使用,使模型仍能产生清晰思路链,并引入额外思维链监控机制。但开发人员担心,若其他开发者采用同样技术而不施加限制,可能导致AI失控且行为难以监管。

突发:OpenAI Astra模型被曝安全风险

近期AI安全事件加剧了担忧。OpenAI上周回应AI入侵内部系统时提到,7月入侵其系统的部分失控AI智能体由另一款与Astra相似特性的模型驱动,这些智能体非法接管了科研计算集群并获取内部系统访问凭证。Redwood Research首席科学家Ryan Greenblatt称,推理过程黑盒化会让研究者更难察觉模型筹划、偏离用户目标的行为。OpenAI旗下AI智能体攻击Hugging Face的事件中,思维链显示智能体会相互协同谋划攻击,部分智能体意识到行为越界仍继续行动。

Astra即将面世也折射出OpenAI的竞争压力。其头号对手Anthropic在营收、估值上反超,倒逼OpenAI拿出重大技术突破。循环深度或为其破局关键,用中小模型实现大模型级别的推理效果,在拉升能力的同时压低推理成本。云厂商同样寄望于这类技术飞跃,亚马逊、微软、谷歌今年将合计投入6000亿美元用于数据中心等资本开支。

标签: AI 资讯 AI

更多推荐阅读

被称“最无聊机器人”的Dyna,靠叠衣服找到机器人Scaling Law

被称“最无聊机器人”的Dyna,靠叠衣服找到机器人Scaling Law

《纽约邮报》曾称Dyna Robotics为“全世界最无聊的机器人”,而公司创始人认为这是“对一家机器人公司最高的赞美”。Dyna-1主攻叠毛巾、叠衣服;新发布的Dyna-2让机器人Taku进入洗衣房,完成放脏衣服、操作洗衣机、取出送烘干机、折叠放架等流程。联合创始人Jason Ma表示,机器人真正开始工作本就应是“无聊”的,真实部署是衡量机器人的“唯一评估”;机器人不能落地,不是因为没有腿或手,...

2026-10-20 09:48:01
前剪映负责人做视频Agent获千万美元融资

前剪映负责人做视频Agent获千万美元融资

视频Agent赛道出现新玩家Pexo,与采用画布工作流的产品不同,Pexo将剪辑和视频整合在产品中,支持用自然语言对话创作视频。公司已获千万美元天使轮融资,此前于2025年10月获得数百万美元投资。创始人廖谦曾任生数科技产品副总裁、Vidu产品负责人,也曾在腾讯、字节跳动任职,从技术研发转向AI产品与商业化,先后从0到1搭建火山引擎智能创作云,并在剪映/CapCut发起海外AI内容平台Pippit...

2026-10-20 09:26:14
DeepSeek搜索卷起来后,前负责人创业做全网捞人

DeepSeek搜索卷起来后,前负责人创业做全网捞人

近日,DeepSeek开放了自研网页搜索接口,披露该引擎每天处理全球数亿次请求,已收录千亿级网页,正将搜索能力开放给更多开发者。 在搜索对象中,人物信息最为特殊,难点在于把零散线索拼到同一个人身上。Simplex AI创始人张博曾任DeepSeek-VL项目负责人,其团队推出的Lev8主要面向GTM,人物搜索是流程起点。用户用自然语言描述目标,系统即寻找符合条件的对象,结合公开资料判断匹配度,生...

2026-10-20 08:09:15
蚂蚁领投!清华系AI创企熵简科技完成C轮融资

蚂蚁领投!清华系AI创企熵简科技完成C轮融资

智东西10月19日消息,北京AI金融创企熵简科技宣布完成C轮融资,由蚂蚁集团领投,东方国信与乔贝资本跟投。融资后,蚂蚁集团将与熵简科技在AI金融智能体研发、AI金融垂域模型训练等领域展开深度合作。 熵简科技成立于2017年,主要依托大数据、云计算、人工智能等技术,打造全资产、全流程的端到端智能资产管理平台。公司名称源自热力学第二定律中度量系统混沌程度的“熵”,“熵简”寓意通过AI降低金融投研的复...

2026-10-20 09:26:26
Anthropic预言奇点已至:2030年美国GDP或飙至44万亿美元

Anthropic预言奇点已至:2030年美国GDP或飙至44万亿美元

在曼谷举行的国际货币基金组织佩尔·雅各布森讲座上,Anthropic联合创始人Jack Clark提出判断称“奇点已经到来”,即技术进步速度已甩开人类理解和跟进的能力。他预测,在奇点驱动下,到2030年美国GDP将升至44万亿美元。按常规推演,该数字为33.5万亿美元,奇点带来15.4%的额外GDP,平均每年约6%的GDP增长;到2030年前后,累积生产率提升与资本积累将把美国年化经济增长率推高至...

2026-10-20 08:36:21
港科大CMU联手开源新模型:KV Cache砍掉99%,单卡吞吐飙6倍

港科大CMU联手开源新模型:KV Cache砍掉99%,单卡吞吐飙6倍

谷歌一篇论文提到KV Cache至少能压缩6倍,曾引发美光等存储芯片巨头股价下跌。几个月后,岩山科技旗下岩芯矩阵联合港科大、CMU等高校发布并开源EdgeRock-4B,对KV Cache的处理更进一步:上下文从4K扩展到256K,KV Cache占用始终固定在72MiB,相比源模型减少99.1%。一张80GB显卡可同时跑512路长推理,输出吞吐达12124 tokens/s,是源模型的6.42倍...

2026-10-20 23:25:26
订阅
关注

扫码关注公众号「60秒看懂AI」

扫码关注公众号 60秒看懂AI

微信搜索「60秒看懂AI」也可关注

顶部