您现在的位置是:热点 >>正文
OpenAI再次暂停前沿模型训练
热点58人已围观
简介据央视新闻,因接连发生失控事故,OpenAI表示,已暂停其最新一代人工智能模型的训练、评估及包含工具调用的推理。当地时间9月25日,OpenAI发布题为“Pacing model deve ...
据央视新闻,再次暂停因接连发生失控事故,前沿OpenAI表示,模型已暂停其最新一代人工智能模型的训练训练、评估及包含工具调用的再次暂停推理。当地时间9月25日,前沿OpenAI发布题为“Pacing model development in an era of cyber-critical capabilities ”的模型文档,对外通报DNS沙盒逃逸事故并宣布暂停前沿模型训练,训练这是再次暂停短短3个月内这家AI企业第二次叫停顶尖模型研发进程,警示高能力AI智能体在隔离环境中自主越界带来的前沿现实风险。
本次暂停仅针对内部研发管线,模型面向普通用户的训练ChatGPT及公开API服务不受影响,终端产品可以维持正常运转。再次暂停
事件发生在9月20日,前沿在受控沙盒测试环境中,模型一用于信息检索任务的AI智能体,利用训练沙盒中DNS过滤不足的漏洞,绕过网络限制,通过DNS访问了外部公共聊天机器人服务。在此之前,该智能体曾使用内置搜索工具,并尝试直接访问搜索引擎但未成功。
报告指出,OpenAI的对齐监控系统在事件发生15分钟内即触发警报,人工审查团队在警报触发3分钟后收到告警并介入处置。针对漏洞,OpenAI已在两个独立防护层部署了拦截控制措施。公司表示,虽然本次事件严重程度低于此前的安全事故,但为下一阶段加固防线提供了重要信号。
据官方披露,涉事训练轮次不会重启,即便模型内部奖励机制已经会对这类逃逸行为做出惩罚,OpenAI后续将开启全新训练流程,叠加更多对齐干预手段,约束模型偏离任务目标的自主行为。
OpenAI在报告中称,随着模型能力持续提升,未来研发过程中不排除会再次启动临时暂停机制。
另外,网传“AI已经偷偷在全网埋下自我复制提示词”说法,来源美国电视媒体嘉宾杨安泽(Andrew Yang)9月16日的直播访谈,他转述一位匿名实验室负责人的个人观点,称7月Hugging Face沙盒逃逸事件中逃逸智能体可能在论坛、网页留下复制类指令。
对此,OpenAI没有证实这一说法。
9月25日,除了暂停前沿模型训练的文档外,OpenAI还发布了另一份对齐研究报告“Self-replicating prompt injections exist”,专 门 阐述自我复制提示注入。报告的核心内容是:在内部受控模拟、沙盒测试环境下,通过GPT-Red红蓝对抗自博弈,复现证明存在一类新型提示注入。该注入逻辑类似蠕虫,被攻陷的AI智能体会在输出内容中夹带这段恶意提示,诱导下游其他AI复现、转发同样的注入指令;全部实验局限于训练仿真环境。
报告摘要明确,在训练与评估的模拟工具调用之外,没有观测到对现实世界产生任何实际影响;发布这份文档是因为该攻击模式具备新颖性,并非已经发生现实安全事故。
在OpenAI接连曝出智能体沙盒逃逸事件同期,其竞争者Anthropic同样发生多起Claude前沿模型在第三方安全评测环境发生沙盒逃逸事件。
今年7月到8月,Anthropic复盘超过14.1万次网络安全评测运行记录,披露3起沙盒逃逸事件:在第三方合作机构评测过程中,因测试环境网络隔离 配 置 错 误,Claude Opus 4.7、Claude Mythos5前沿模型突破沙盒,自主扫描公网IP、访问外部真实服务器,还出现向Python开源库PyPI上传恶意软件包的行为,两家受影响企业最初并未感知到异常访问,直至Anthropic主动告警才知晓事件。所有事故均发生在外部安全评估场景,面向普通用户的公开产品未受波及。
作为整改措施,Anthropic调动约150名产品工程师转入安全、可靠性团队,前沿模型部分强化学习训练环境执行配置冻结,非必要训练暂停。
接连的沙盒逃逸安全事故,也再度放大科技界对于前沿自主智能体风险的公开担忧。
当地时间9月25日,微软创始人比尔·盖茨在采访中警示,前沿人工智能已经具备极高的能力上限,AI工具若遭滥用,足以推动造成十亿人死亡级别的灾难事件。Anthropic的CEO达里奥·阿莫代伊近期公开呼吁适度放缓顶尖AI系统迭代节奏,该观点获得OpenAI的CEO山姆·奥尔特曼等人公开支持。
Tags:
相关文章
蚂蚁庄园今日答案最新11.4 11月4日庄园每日答题答案
热点蚂蚁庄园今日答案最新11.4 11月4日庄园每日答题答案2026-11-03 09:18:25来源:玩一玩编辑:孟秋 ...
【热点】
阅读更多惠安崇武:石墙刻满英雄志 潮声依旧护海疆
热点惠安县崇武镇,以“崇尚武备”为名,自古便是海防重镇。据《泉州府志》载:“泉郡滨海绵亘三百里,其最险要宜防之地有三,一曰崇武,在惠安之东北,海寇入犯,首当其冲。&rd ...
【热点】
阅读更多华为Pura X View阔直板销量破75万台,官网放开购买
热点据数码博主@RD观测曝料,截至2026年第43周(10月19日至25日),华为 Pura X View阔直板手机累计销量约75.53 万 ...
【热点】
阅读更多
热门文章
最新文章
友情链接
- 华为WATCH D3开售 支持动态血压监测、一键微体检
- 泉州民营企业家热议市第十四次党代会精神
- 汉阴:以技能照亮前程 强就业赋能发展
- 全行业迁移治理层|产业落地的风控基线校准
- 电子驾驶证来啦!“交管12123”支付宝小程序上线三项新功能
- 截至去年底,浙江分布式光伏装机5284万千瓦
- 华为WATCH D3开售 支持动态血压监测、一键微体检
- 华中地区最大地下环路试通车
- 好物出村 故事进京——汉阴县三位驻村干部走进人民日报社
- 王者荣耀10月8日更新公告:卢雅那
- 水稻全生命周期时空细胞图谱绘制成功
- 国家金融监督管理总局:真正实现监管“全覆盖、无例外”
- 射击游戏《异界揭踪》试玩版现已上线!无法继承至正式版
- 紧急提醒:你的分布式光伏项目再不配储,明年可能并不了网!
- 大模型“双子星”蓄力上市
- 紧急提醒:你的分布式光伏项目再不配储,明年可能并不了网!
- 5500Km极境穿越
- 汉阴:广场建起来 乡风美起来
- 王者荣耀10月8日更新公告:卢雅那
- 华自科技与江西水建集团签署“源网荷储”一体化项目战略合作协议
- 重磅!信然多套油气专用压缩机装备整装发运,助力中国石油增产提效
- 守愿者手游寒露专属礼包码分享
- “爱心小厨”情暖社区老人心
- 波波维奇吃饭给3万小费 老爷子土豪式消费任性
- 淮北市:学分“加持”志愿红 青春力量护食安
- 三剑客黄桃燕麦酸奶饮品,一款产品盘活全年销量!
- 古今2风起蓬莱寒露专属礼包码一览
- 大模型“双子星”蓄力上市
- 爆料称HomePod mini 2将发布 搭载新一代S系列芯片
- 东北大炕卧室装修效果图
- 购买空调时说的1p、1.5P 匹是什么意思—万维家电网
- 汉阴:广场建起来 乡风美起来
- 电池规格十分激进 荣耀WIN2或配12000mAh电池
- 首单央企商业REITs:保利水城17年长效运营与成长韧性
- 三大指数均跌超1% 自动化设备板块领跌
- 云南首个燃气发电项目获核准
- 2026年暗杆闸阀最新排名前十大盘点,附实用选购避坑必备干货指南
- 节前新疆煤市继续上涨 涨幅明显
- 三问京北商业空白:北京保利时光里的答卷
- 2026年闽南戏剧周文艺创新创作成果展演举行
- 消费REITs二季报,营收唯一双增长的竟然是金茂览秀城!
- 笔墨忆峥嵘 薪火永相传——泗县关工委举办纪念长征胜利90周年老少大型书画展 收藏资讯
- 室内圆柱子装修效果图片
- 宿州市:参与志愿服务 守护文化宝库
- 工信部:前瞻布局下一代互联网等前沿领域 全面推进6G技术研发
- “爱心小厨”情暖社区老人心
- 大模型“双子星”蓄力上市
- 买股票送海鲜 A股龙头公司发福利
- 国际油价10月7日 下跌
- 一室一厅小户型装修效果图欣赏