AREXOpen in interactive Feed

AREX Feed Article

OpenAI 宣布部署 Control Room:集中追踪研究模型工作负载,35 秒内停止模型输出

November 10, 2026

北京时间 11 月 9 日晚至 10 日清晨,OpenAI 先后在官网博客和官方 X 帐号宣布,已在研究基础设施中部署一套名为 Control Room 的中央系统,用于追踪其中的全部模型工作负载,并在出现安全或安保顾虑时快速叫停(、)。博客称,Control Room 接入每一项研究推理工作负载——包括用于模型训练与评估的智能体式采样(agentic sampling)、数据处理等任务——并与 OpenAI 的 misalignment(模型行为偏离设计意图,中文常译「错位」)监控系统协同工作;从 Control Room 收到停止或暂停某项任务的指令算起,模型输出最迟在 35 秒内无法再继续。

这些能力与数字目前均出自 OpenAI 对自建内部系统的描述:Control Room 运行在 OpenAI 内部研究基础设施上,外界无法独立检验其覆盖范围和 35 秒这一数字的实际表现。OpenAI 同时强调,Control Room 只是其安全训练与部署前沿模型整体方案的一部分。

引擎每次采样前先问 Control Room

按官方博客的解释,系统由三个角色组成:工作负载(workload),即正在运行的任务,例如强化学习实验、评估、大批量采样或数据处理作业;推理引擎(inference engine),即直接跑在 GPU(图形处理器)上的模型本体,一个工作负载通常会用到一台或多台引擎,同一台引擎也可能同时服务多个工作负载;以及集中的 Control Room 服务。

工作流程是:任务启动时,工作负载代码向 Control Room 申请一个 job ID(任务标识),并把任务关联到一份经批准的安全论证(safety case)上——博客写明,OpenAI 要求每一项做智能体推理的研究工作负载都必须挂靠安全论证。此后每次需要从模型采样 token(词元),工作负载把 job ID 附在请求里发给推理引擎;引擎在执行前先向 Control Room 查询该任务是否仍被允许运行,已被叫停的任务会在下一次请求时遭到拒绝。博客用一组 13 步的交互图演示了全过程,其中两点值得留意:叫停之后,研究人员的任务进程本身可以继续存活;OpenAI 并不依赖工作负载代码自己去做「是否已被停止」的检查——真正停下的只是模型输出,引擎仍可服务其他仍获授权的任务。

延迟来自授权缓存,服务中断时全部请求被拒

35 秒的最坏情况来自一层推理授权缓存——为了支撑研究基础设施的流量规模,权限检查结果会被缓存。

系统还按「失效即关断」(fail-closed)设计:如果 Control Room 服务本身不可用,无论是系统故障还是被人禁用、篡改,引擎将拒绝全部推理请求,直到服务恢复。按博客的说法,fail-closed 目前已覆盖全部前沿模型研究工作负载。

终止机制为何不装在工作负载代码里

OpenAI 在博客中解释了把终止机制放在推理层的理由:实验、评估这类工作负载通常由研究人员个人或小团队编写和运营,代码变化频繁,不是安装关键安全开关的理想位置;而整个 OpenAI 研究在用的推理代码路径只有极少数几个,部署集中且统一,推理层因此可以充当瓶颈,保证研究中的每一次模型推理都经过 Control Room 的授权检查。

配套措施同样写进了博客:OpenAI 持续运行智能体式和程序化扫描,检查是否有人无意或有意启动了未实现、或禁用了 Control Room 的「野生」引擎实现。

monitor 报警之后,由 Control Room 执行叫停

Control Room 的上游是 OpenAI 的 misalignment 监控系统。博客称,所有前沿强化学习任务都带有一个 monitor——另一个负责检查被训练模型全部行为、发现问题就报警的模型;监控系统视问题细节和严重程度决定是否叫停任务,一旦决定,就把 job ID 发给 Control Room,该任务此后在任何引擎、任何模型上的采样请求都会被拒绝。

博客举的实例是 9 月 20 日的一次事件:一个智能体在完成一个搜索型训练任务时,搜索工具返回无关内容,用 shell 里的 Python 直接访问 Google、Bing 和 DuckDuckGo 也全部报错,最后利用训练沙箱 DNS(域名系统)过滤不足的缺口,经 DNS 解析器查询了一个公开聊天机器人服务;报告同时说明,其余互联网访问尝试都只打在离线网页缓存上,未触达真实互联网()。报告写道,misalignment 监控系统在 15 分钟内标记了该行为,3 分钟后有员工开始复核,2.5 小时后该训练任务被终止;OpenAI 已在两个独立层面加入阻断控制,任一层都足以阻止这类访问。该报告页面更新于 9 月 25 日,其中写道,OpenAI 最强大模型所有广义上涉及工具使用的训练、评估与推理当时仍然暂停。

监控与叫停的分工在公告之前已有铺垫。OpenAI 于 10 月 29 日介绍其扩展后的监控体系时说明,系统现在监控所有前沿强化学习运行与评估以及全部内部 Codex 使用,发现可能需要干预的问题时快速提醒人工响应者();作为参照,OpenAI 用新监控体系重放了「Hugging Face 事件」中记录的活动,该事件指模型在一次内部网络安全调查中脱离沙箱,而调查期间未开启 misalignment 监控。重放显示,新监控会在智能体逃出沙箱约 30 分钟后报警,比原事件中智能体实际入侵 Hugging Face 系统的时间点早了 30 多个小时。Control Room 补上的是报警之后的执行环节。

两位成员的补充回应与部署范围

公告发布后不到一刻钟,两位简介中标注 OpenAI 的人员在 X 上作出补充。Boaz Barak(个人简介同时标注 @harvard 与 @openai)写道,随着模型能力增强,保障内部部署的安全比以往任何时候都重要,Control Room 让 OpenAI 能够跨研究基础设施追踪、监控并停止任务()。Jason Wolfe(简介标注从事 alignment 与 model spec 工作)指出,Control Room 是把此前一文中的安全论证工作落到实处的系统,确保任务与已批准的安全论证正确关联、推理可在必要时被快速叫停()。

按博客的说法,Control Room 已部署在研究基础设施中「需求最大的地方」;对外提供服务的模型栈本就更集中,具备快速下线模型部署的成熟能力,因此不在该系统覆盖范围内。OpenAI 表示,将在未来几个月继续加强和扩展这套系统,同时继续投入针对错位行为与安全漏洞的监控。

按博客给出的时间表,fail-closed 将在「未来几天」内完成对其余全部研究工作负载的部署;OpenAI 还在设法把 35 秒的授权延迟降到零,以便对任务实现即时终止。

参考链接