分享好友 资讯首页 频道列表

给失控 AI 智能体装"急刹车":OpenAI 35 秒熔断机制上线

1970-01-01 08:3310950

AI 智能体一旦跑偏,人类还能不能拉得住缰绳?OpenAI 在 11 月 10 日给出了一道新保险——名为"控制室"的系统已在内部研究设施上线,专门用来掐断有风险的 AI 任务,最快能在 35 秒内叫停一只失控的智能体。

从"报警"升级到"断供"

传统监控只会给可疑行为贴标签,而控制室走的是主动阻断路线。它把智能体训练、评估和数据处理等任务负载接入中央服务,由系统拍板某项任务能否继续吐出内容。研究员启动任务前,必须向控制室申领唯一任务 ID,这个身份标识会跟随每一次发给推理引擎的请求;引擎在跑之前得先问控制室:"这活儿能不能干?"

一旦研究员或监控系统喊停,控制室就会拒绝下一次推理请求,让引擎不再为该项任务输出任何模型结果。换句话说,危险动作不是被记录,而是被当场切断。

35 秒延迟,目标归零

OpenAI 透露,从收到停止指令到彻底拦下任务,最长耗时 35 秒。这道时差来自推理授权请求的缓存层,公司正设法把它压到零。与此同时,所有前沿强化学习任务都配了独立的模型监控器,负责盯行为、发现问题就拉响警报。

让 AI 自己看着 AI 跑、再设一道人工可触发的急停开关,OpenAI 这套组合拳,折射出行业对"失控智能体"风险的警惕正从纸面预案走向工程落地。

反对 0
举报 0
收藏 0
打赏 0
评论 0
荣耀官宣萨维、赵家驹、闪电三冠军将首次同框
荣耀官宣萨维、赵家驹、闪电三冠军将首次同框

0评论2026-10-231065

英伟达升级Isaac通用机器人平台并发布Agile ONE SN人形样机
英伟达升级Isaac通用机器人平台并发布Agile ONE SN人形样机

0评论2026-10-23861

抢在对头上市前“吸金”!OpenAI 紧急开启 300 亿美元新融资,估值冲向 1.4 万亿美元
抢在对头上市前“吸金”!OpenAI 紧急开启 300 亿美元新融资,估值冲向 1.4 万亿美元

0评论2026-10-232234

阶跃终端发布首款Agent手机STEPX Neo,大模型接管手机操作系统
阶跃终端发布首款Agent手机STEPX Neo,大模型接管手机操作系统

0评论2026-10-171441

ChatGPT 浏览器扩展大升级:能读你开着的标签页,还替你填表发信
ChatGPT 浏览器扩展大升级:能读你开着的标签页,还替你填表发信

0评论2026-10-171405

11.88万元起,都市精领首选全新领克20正式上市
11.88万元起,都市精领首选全新领克20正式上市

0评论2026-10-021320

高德空间智能AI平台亮相:构建完整链路,引领城市与产业迈向自主进化新阶段
高德空间智能AI平台亮相:构建完整链路,引领城市与产业迈向自主进化新阶段

0评论2026-10-021654

云栖大会韶音OpenFit2AI耳机惊艳登场,“AI 实验室”四大功能开启交互新体验
云栖大会韶音OpenFit2AI耳机惊艳登场,“AI 实验室”四大功能开启交互新体验

0评论2026-10-022856

宇树科技Dex5-S灵巧手发布:22自由度,3.99万元起
宇树科技Dex5-S灵巧手发布:22自由度,3.99万元起

0评论2026-10-02804