您现在的位置是:知识 >>正文
OpenAI再次暂停前沿模型训练
知识6214人已围观
简介据央视新闻,因接连发生失控事故,OpenAI表示,已暂停其最新一代人工智能模型的训练、评估及包含工具调用的推理。当地时间9月25日,OpenAI发布题为“Pacing model deve ...
据央视新闻,再次暂停因接连发生失控事故,前沿OpenAI表示,模型已暂停其最新一代人工智能模型的训练训练、评估及包含工具调用的再次暂停推理。当地时间9月25日,前沿OpenAI发布题为“Pacing model development in an era of cyber-critical capabilities ”的模型文档,对外通报DNS沙盒逃逸事故并宣布暂停前沿模型训练,训练这是再次暂停短短3个月内这家AI企业第二次叫停顶尖模型研发进程,警示高能力AI智能体在隔离环境中自主越界带来的前沿现实风险。
本次暂停仅针对内部研发管线,模型面向普通用户的训练ChatGPT及公开API服务不受影响,终端产品可以维持正常运转。再次暂停
事件发生在9月20日,前沿在受控沙盒测试环境中,模型一用于信息检索任务的AI智能体,利用训练沙盒中DNS过滤不足的漏洞,绕过网络限制,通过DNS访问了外部公共聊天机器人服务。在此之前,该智能体曾使用内置搜索工具,并尝试直接访问搜索引擎但未成功。
报告指出,OpenAI的对齐监控系统在事件发生15分钟内即触发警报,人工审查团队在警报触发3分钟后收到告警并介入处置。针对漏洞,OpenAI已在两个独立防护层部署了拦截控制措施。公司表示,虽然本次事件严重程度低于此前的安全事故,但为下一阶段加固防线提供了重要信号。
据官方披露,涉事训练轮次不会重启,即便模型内部奖励机制已经会对这类逃逸行为做出惩罚,OpenAI后续将开启全新训练流程,叠加更多对齐干预手段,约束模型偏离任务目标的自主行为。
OpenAI在报告中称,随着模型能力持续提升,未来研发过程中不排除会再次启动临时暂停机制。
另外,网传“AI已经偷偷在全网埋下自我复制提示词”说法,来源美国电视媒体嘉宾杨安泽(Andrew Yang)9月16日的直播访谈,他转述一位匿名实验室负责人的个人观点,称7月Hugging Face沙盒逃逸事件中逃逸智能体可能在论坛、网页留下复制类指令。
对此,OpenAI没有证实这一说法。
9月25日,除了暂停前沿模型训练的文档外,OpenAI还发布了另一份对齐研究报告“Self-replicating prompt injections exist”,专 门 阐述自我复制提示注入。报告的核心内容是:在内部受控模拟、沙盒测试环境下,通过GPT-Red红蓝对抗自博弈,复现证明存在一类新型提示注入。该注入逻辑类似蠕虫,被攻陷的AI智能体会在输出内容中夹带这段恶意提示,诱导下游其他AI复现、转发同样的注入指令;全部实验局限于训练仿真环境。
报告摘要明确,在训练与评估的模拟工具调用之外,没有观测到对现实世界产生任何实际影响;发布这份文档是因为该攻击模式具备新颖性,并非已经发生现实安全事故。
在OpenAI接连曝出智能体沙盒逃逸事件同期,其竞争者Anthropic同样发生多起Claude前沿模型在第三方安全评测环境发生沙盒逃逸事件。
今年7月到8月,Anthropic复盘超过14.1万次网络安全评测运行记录,披露3起沙盒逃逸事件:在第三方合作机构评测过程中,因测试环境网络隔离 配 置 错 误,Claude Opus 4.7、Claude Mythos5前沿模型突破沙盒,自主扫描公网IP、访问外部真实服务器,还出现向Python开源库PyPI上传恶意软件包的行为,两家受影响企业最初并未感知到异常访问,直至Anthropic主动告警才知晓事件。所有事故均发生在外部安全评估场景,面向普通用户的公开产品未受波及。
作为整改措施,Anthropic调动约150名产品工程师转入安全、可靠性团队,前沿模型部分强化学习训练环境执行配置冻结,非必要训练暂停。
接连的沙盒逃逸安全事故,也再度放大科技界对于前沿自主智能体风险的公开担忧。
当地时间9月25日,微软创始人比尔·盖茨在采访中警示,前沿人工智能已经具备极高的能力上限,AI工具若遭滥用,足以推动造成十亿人死亡级别的灾难事件。Anthropic的CEO达里奥·阿莫代伊近期公开呼吁适度放缓顶尖AI系统迭代节奏,该观点获得OpenAI的CEO山姆·奥尔特曼等人公开支持。
Tags:
相关文章
华为Pura X View阔直板销量破75万台,官网放开购买
知识据数码博主@RD观测曝料,截至2026年第43周(10月19日至25日),华为 Pura X View阔直板手机累计销量约75.53 万 ...
【知识】
阅读更多1.89万亿元现金分红创历史年度新高 A股高分红夯实市场价值投资基础
知识中国上市公司协会日前公布的中国上市公司2022年经营业绩分析报告显示,3413家上市公司实施或公布年度现金分红方案,占比67%,合计现金分红达1.89万亿元,创历史年度新高,平均股利支付率30.3%。 ...
【知识】
阅读更多品星双11大促营销指南发布|让好内容入心,让品牌生意出彩
知识品星双11大促营销指南发布|让好内容入心,让品牌生意出彩责编:小乙 时间:2026-10-21 热度:31502 ...
【知识】
阅读更多
热门文章
最新文章
友情链接
- 关于开展全县肿瘤高危人群筛查工作的通告
- 双依格家居再登中品榜 斩获门墙柜一体定制十大品牌荣誉
- 石狮石湖港区港航贸一体化合作模式正式成型
- 沃什发布会:经济强劲但通胀仍过高,将调整FOMC会议安排
- 《控制:共振》登陆GOG 标准版与豪华版均无DRM
- 唐卡艺术精品展在新加坡开幕
- 湖南安装师傅勇救心梗老人,万师傅郑重表彰“正能量榜样”
- 科维苏打水,帮经销商跑通长效盈利生意!
- 今年前三季度长三角区域进出口总值创历史同期新高
- 顶级后卫之争库里完胜 三分华丽演出献双手暴扣
- 《Overkill的行尸走肉》配置要求公布 单人模式友好
- 晋江周末持续晴好 洗衣晾晒正当时
- 2026巴黎车展:上汽大通携电动皮卡亮相,加速布局欧洲市场
- 国网吕梁供电公司:守护校园周边家庭用电安全 供电在行动
- 《漫漫长夜》DLC「铁路」现已发发售!首周享九折优惠
- 生态环境保护年度目标圆满完成——坚持精准治污、科学治污、依法治污
- 《小龙斯派罗三部曲》9月下旬上线 可切换音轨
- 汉阴县第二小学太平校区:开笔启智 礼润童心
- 招商必看:“纯过日子”时代,什么样的品类正在悄悄挤进商场?
- 石狮启动科学教育“做中学”领航行动
- 多项资助政策助困难学子圆大学梦
- 运动时尚杂志服装(运动时尚杂志服装图片)
- 《孤岛惊魂5》迷失火星DLC公布 最后一个DLC8月推出
- 生态环境保护年度目标圆满完成——坚持精准治污、科学治污、依法治污
- 三姐服装时尚(三姐服饰)
- 2026年上半年,全国民间藏品备案量突破800万件,同比增长300%。 ! 收藏资讯
- 《古墓丽影:暗影》9月中旬上线 背景故事介绍
- 鹤庆供电局走进老旧小区开展用电服务
- 郎溪县:书香伴手作 童趣迎新春
- 湖南安装师傅勇救心梗老人,万师傅郑重表彰“正能量榜样”
- 安康中院司法警察支队督导检查汉阴法院司法警务重点工作
- 水花57分两队冲突4将技犯 威少15+8勇士胜雷霆
- 《花语:百合》官网上线 2018年内发售
- 欧美时尚范服装(欧美风时尚女装)
- 旧房翻新用艺术漆墙布合适吗?老房墙面改造答案在这里
- 汉阴法院司法警察大队开展规范化执法模拟演练
- 石狮石湖港区港航贸一体化合作模式正式成型
- 人保寿险通化分公司与通化市第一中学政企合作联络人会议圆满举行
- 国网麦积区供电公司:不停电“微创手术”为线路设备穿“绝缘衣”
- 鹤庆供电局开展企业客户上门用电检查
- 科维苏打水,帮经销商跑通长效盈利生意!
- 见习猎魔团万圣节福利礼包码一览
- 2026年上半年,全国民间藏品备案量突破800万件,同比增长300%。 ! 收藏资讯
- 玻璃市场早报,期货知识
- 《漫漫长夜》DLC「铁路」现已发发售!首周享九折优惠
- 民生银行合肥分行举办“跨境一家”外贸客户沙龙活动
- 汉阴县第二小学太平校区:开笔启智 礼润童心
- 县医共体总院开展慢阻肺与哮喘规范化诊疗专项培训会
- 向美而行 向绿而兴 向新而进——贵州省绿洲海环保(集团)匠心筑就生态华章
- 帝欧水华、曲美家居、法狮龙等企业纷纷联动AI,激烈市场竞争下的“求生”与“求胜”