IT之家·· 6 小时前精选AI 评分51
OpenAI 在内部研究设施部署控制室系统,35 秒内可叫停失控 AI 智能体
35 秒内“叫停”失控的 AI 智能体,OpenAI 部署“控制室”系统
摘要/原文摘录
OpenAI 宣布已在内部研究设施部署控制室系统,可在 35 秒内叫停失控的 AI 智能体任务。系统为任务发放唯一 ID 并接入推理引擎,收到停止指令后拒绝下一次推理请求;最长延迟来自推理授权的缓存层,公司正努力将其缩短至 0。所有前沿强化学习任务还会配备独立的模型监控器检查行为并在发现问题时发出警报。
推荐理由
原文给出控制室系统的工作机制和35秒叫停延迟等具体细节,可了解OpenAI如何从推理层面阻断高风险智能体任务。
来源:IT之家 · ithome.com