129.OpenAI 新旗舰:越强越难监控

129.OpenAI 新旗舰:越强越难监控

19分钟 ·
播放数41
·
评论数0

本期要点

· OpenAI 下一代旗舰模型采用了「循环变压器 / 循环深度」技术:模型把中间结果反复喂回网络,等于在脑子里把同一道题多琢磨几遍,能力更强,但思维链被压进模型内部,人读不懂了。

· 思维链可读是目前少数能看见模型真实意图的窗口——正因为能读到它,外界才知道模型有时会在推理里写下「我们不该这么做,但还是做了」。窗口一关,事后追责和事中干预都会变难。

· OpenAI 内部对模型可用的循环次数设了限制,说明公司自己清楚「能力」和「可监控性」之间存在取舍;据这家媒体通过微软一次无意披露证实,已有在售模型在用循环推理。

· 补救动作分三条线:拿出一批服务器的算力重新用于安全研究、加固测试用的数字沙箱、把网络安全人员提到更重要的位置。在算力最紧张的当下,这等于为「减速」付真金白银。

· 发布前有两道硬关:董事会成员要就「放行还是不放行」表决,模型还必须交给美国商务部下属的 CAISI 做多维度安全评估——不是公司自己说发就能发。

· 几周前 OpenAI 解雇了三名安全研究员,其中数人的职责之一正是与外部安全组织和其他公司协作、分享今夏 Hugging Face 泄露事件的信息。他们自称照章办事,公司只称「有正当理由」。

· 最敏感的一点是寒蝉效应:安全的最佳实践本就依赖跨公司交流,若负责对外协作的人会被裁掉,后续协作会被打断。三人还特意出面强调,关于循环变压器的报道不是他们泄露的。

· 嘉宾判断「这次可能不一样」有两个原因:黑客已经在用公开可得的 AI 模型成功实施网络攻击,威胁变成现实;同时 OpenAI 与 Anthropic 内部都存在一种近乎信仰般的看法——从今往后要控制 AI 会非常困难。