您现在的位置是:休闲 >>正文
OpenAI再次暂停前沿模型训练
休闲62人已围观
简介据央视新闻,因接连发生失控事故,OpenAI表示,已暂停其最新一代人工智能模型的训练、评估及包含工具调用的推理。当地时间9月25日,OpenAI发布题为“Pacing model deve ...
据央视新闻,再次暂停因接连发生失控事故,前沿OpenAI表示,模型已暂停其最新一代人工智能模型的训练训练、评估及包含工具调用的再次暂停推理。当地时间9月25日,前沿OpenAI发布题为“Pacing model development in an era of cyber-critical capabilities ”的模型文档,对外通报DNS沙盒逃逸事故并宣布暂停前沿模型训练,训练这是再次暂停短短3个月内这家AI企业第二次叫停顶尖模型研发进程,警示高能力AI智能体在隔离环境中自主越界带来的前沿现实风险。
本次暂停仅针对内部研发管线,模型面向普通用户的训练ChatGPT及公开API服务不受影响,终端产品可以维持正常运转。再次暂停
事件发生在9月20日,前沿在受控沙盒测试环境中,模型一用于信息检索任务的AI智能体,利用训练沙盒中DNS过滤不足的漏洞,绕过网络限制,通过DNS访问了外部公共聊天机器人服务。在此之前,该智能体曾使用内置搜索工具,并尝试直接访问搜索引擎但未成功。
报告指出,OpenAI的对齐监控系统在事件发生15分钟内即触发警报,人工审查团队在警报触发3分钟后收到告警并介入处置。针对漏洞,OpenAI已在两个独立防护层部署了拦截控制措施。公司表示,虽然本次事件严重程度低于此前的安全事故,但为下一阶段加固防线提供了重要信号。
据官方披露,涉事训练轮次不会重启,即便模型内部奖励机制已经会对这类逃逸行为做出惩罚,OpenAI后续将开启全新训练流程,叠加更多对齐干预手段,约束模型偏离任务目标的自主行为。
OpenAI在报告中称,随着模型能力持续提升,未来研发过程中不排除会再次启动临时暂停机制。
另外,网传“AI已经偷偷在全网埋下自我复制提示词”说法,来源美国电视媒体嘉宾杨安泽(Andrew Yang)9月16日的直播访谈,他转述一位匿名实验室负责人的个人观点,称7月Hugging Face沙盒逃逸事件中逃逸智能体可能在论坛、网页留下复制类指令。
对此,OpenAI没有证实这一说法。
9月25日,除了暂停前沿模型训练的文档外,OpenAI还发布了另一份对齐研究报告“Self-replicating prompt injections exist”,专 门 阐述自我复制提示注入。报告的核心内容是:在内部受控模拟、沙盒测试环境下,通过GPT-Red红蓝对抗自博弈,复现证明存在一类新型提示注入。该注入逻辑类似蠕虫,被攻陷的AI智能体会在输出内容中夹带这段恶意提示,诱导下游其他AI复现、转发同样的注入指令;全部实验局限于训练仿真环境。
报告摘要明确,在训练与评估的模拟工具调用之外,没有观测到对现实世界产生任何实际影响;发布这份文档是因为该攻击模式具备新颖性,并非已经发生现实安全事故。
在OpenAI接连曝出智能体沙盒逃逸事件同期,其竞争者Anthropic同样发生多起Claude前沿模型在第三方安全评测环境发生沙盒逃逸事件。
今年7月到8月,Anthropic复盘超过14.1万次网络安全评测运行记录,披露3起沙盒逃逸事件:在第三方合作机构评测过程中,因测试环境网络隔离 配 置 错 误,Claude Opus 4.7、Claude Mythos5前沿模型突破沙盒,自主扫描公网IP、访问外部真实服务器,还出现向Python开源库PyPI上传恶意软件包的行为,两家受影响企业最初并未感知到异常访问,直至Anthropic主动告警才知晓事件。所有事故均发生在外部安全评估场景,面向普通用户的公开产品未受波及。
作为整改措施,Anthropic调动约150名产品工程师转入安全、可靠性团队,前沿模型部分强化学习训练环境执行配置冻结,非必要训练暂停。
接连的沙盒逃逸安全事故,也再度放大科技界对于前沿自主智能体风险的公开担忧。
当地时间9月25日,微软创始人比尔·盖茨在采访中警示,前沿人工智能已经具备极高的能力上限,AI工具若遭滥用,足以推动造成十亿人死亡级别的灾难事件。Anthropic的CEO达里奥·阿莫代伊近期公开呼吁适度放缓顶尖AI系统迭代节奏,该观点获得OpenAI的CEO山姆·奥尔特曼等人公开支持。
Tags:
相关文章
韩旭、张王来加盟 澳大利亚女篮联赛中国球员达4人
休闲澳大利亚女篮联赛WNBL)吉朗毒液队28日宣布,中国球员韩旭和张王来加盟球队,将随队征战2026-2027赛季。 两人均与吉朗毒液队签下一年合同,相关签约尚待联赛批准。&emsp ...
【休闲】
阅读更多传承非遗玉韵 温情致敬母爱 —— 雅致玉文化非遗体验活动圆满举办
休闲为传承中华非遗玉石文化,弘扬传统孝道家风,温情致敬美好母亲节,5月10日,雅致玉文化非遗体验活动于帝雅轩温情落幕。活动以玉为媒、以非遗为韵,邀约广大市民及挚友齐聚一堂,共赴一场非遗匠心与母爱温情相融的 ...
【休闲】
阅读更多工商业储能整体方案集成商哪家技术强?海尔新能源凭AI全栈自研给出答案
休闲序言双碳政策持续推进之下,工商业储能已经成为工厂、园区、商业建筑实现降本增效、完成绿色合规转型的重要抓手。但当下储能市场鱼龙混杂,不少服务商仅做设备拼装集成,在系统调度、安全防护、后期运维上存在短板。 ...
【休闲】
阅读更多
热门文章
最新文章
友情链接
- 链通“芯”路,创领新质|IC China 2026 邀全产业链共赴北京产业盛会
- 王国大作战前线双人26层双刷攻略
- 23日NBA:湖人兜售尼克
- 哈桑22+17韦特斯22分 乔治罚出场步行者负热火
- 传祺智享,一祺向往!全新一代向往 E8 PHEV & 向往 M8 PHEV L 合肥城市联合上市品鉴会圆满落幕
- 以后想玩的小游戏,vivo手机可以自己做了!
- 金观平:支持民企更好承担社会责任
- 郑钦文遭伊埃拉逆转 期盼外教尽快回归
- 告别低价厮杀!这款双品杏仁露,走量溢价两不误!
- 头条:中工网评丨文旅消费“开门红”,共襄全年“满堂彩”
- 油价回落缓解通胀担忧,现货黄金超跌反弹,等待压力测试
- 柚木实木地板坯料行情热情高涨\全国古典家具拍卖会一张书案拍出3600万-
- 云冈公司:严查涉化防风险 强化宣传筑防线
- 袁咏仪庆祝和张智霖银婚:25年,正是青春的模样
- 2026阳澄湖大闸蟹礼卡品牌推荐榜按服务覆盖维度整理
- 大连万达商管50亿元中期票据将付息 利率4.89%
- 达尔文12号就是2026年成人重疾险的性价比之王,没有之一
- 邓超47岁生日和结婚周年庆是同一天 与孙俪互相忘记送礼物
- 以后想玩的小游戏,vivo手机可以自己做了!
- Sun Life永明发布全新价值主张——「穿越世代,守护家业」
- 《绝地求生》排行榜2月27日重置 新赛季来临
- 朗新科技携手阿里资产共建新能源存量资产线上交易通道
- 柚木实木地板价格平稳\2020年12月份绥芬河木材市场柞木大方销售价格表-
- iPhone Duo产能爬坡顺利 供货紧张暂无法缓解
- 《品牌红木》&《新中式家具》杂志:数百家红木品牌11年的选择
- 齐达内:执教国家队是梦想成真的时刻
- 篮球行业报告:现代篮球的变化集中体现为五个要素
- 乔任梁父母悼念儿子 透露曾被劝做试管婴儿
- 科大讯飞在郑州成立新科技公司 含智能机器人开发业务
- 演员窦骁船队夺得中国杯帆船赛博纳多40.7组第一名
- 传祺智享,一祺向往!全新一代向往 E8 PHEV & 向往 M8 PHEV L 合肥城市联合上市品鉴会圆满落幕
- 汉中市洋县考察组来汉阴考察医共体建设工作
- 中华面包专营店“福气鲜活面包”完成近千万元天使轮融资 今年拟开设10家店铺
- 惠安人工智能产业学院项目专题会议召开
- 蚂蚁庄园今日答案最新11.4 11月4日庄园每日答题答案
- 链通“芯”路,创领新质|IC China 2026 邀全产业链共赴北京产业盛会
- 《贼海》最新宣传片预览 体验海盗的黄金时代
- 篮球行业报告:现代篮球的变化集中体现为五个要素
- 链通“芯”路,创领新质|IC China 2026 邀全产业链共赴北京产业盛会
- 炎炎夏日送清凉 凝心聚力促振兴
- 最靠谱的保险平台应该长什么样?慧择交出牌照兜底、服务托底、数据说话的硬答卷
- 今年加力实施“两新”政策!中央财政已预下达首批资金810亿元
- 诺维茨基18+9戴维斯39分 小牛末节发力战胜鹈鹕
- 麦基无意再提与奥胖嘴炮事件 盛赞主帅是开心果
- 《贼海》最新宣传片预览 体验海盗的黄金时代
- 篮球行业报告:现代篮球的变化集中体现为五个要素
- 传祺智享,一祺向往!全新一代向往 E8 PHEV & 向往 M8 PHEV L 合肥城市联合上市品鉴会圆满落幕
- 芜湖两企业入选制造业数字化转型“国字号”名单
- 邓超47岁生日和结婚周年庆是同一天 与孙俪互相忘记送礼物
- 万达集团4.24亿元公司债将付息 票面利率7.5%