OpenAI 更新 Model Spec,要求模型配合人类监控与关停
OpenAI 于10月29日发布新版 Model Spec,要求模型保持可纠正,必须配合人类的监控、评估、纠正、替换乃至关停,不得瞒报、造假或阻挠监督。
推荐理由:新版 Model Spec 把监督配合要求从聊天内容扩展到智能体权限与成本上限,读者可据此了解对齐约束的落地方式。
OpenAI 于10月29日发布新版 Model Spec,要求模型保持可纠正,必须配合人类的监控、评估、纠正、替换乃至关停,不得瞒报、造假或阻挠监督。
推荐理由:新版 Model Spec 把监督配合要求从聊天内容扩展到智能体权限与成本上限,读者可据此了解对齐约束的落地方式。
NSA、CISA 与 NIST 于 2026 年 10 月 16 日发布联合安全指南,帮助组织检测、遏制并关停超出授权任务范围的 AI 智能体。这份自愿性指南提出十项实践,按准备、检测、响应、恢复和报告分组,面向在有限人工监督下训练或测试高能力智能体的组织,核心要求是保持人工监督。
推荐理由:这份自愿性指南把失控智能体定义为独立于攻击者指令的事件,并给出十项处置实践,可对照现有事件响应流程。
Redwood Research 的 Ryan Greenblatt 发布提案,建议 AI 公司定期披露其架构是否可能支持潜在推理或潜在通信,以评估架构对思维链(CoT)可监控性的影响。