Anthropic 那款模型刚上线几天就因 jailbreak 被紧急下架,表面看是安全事故,其实从某种角度看,它更像一次被迫的“公开诊断”。当前大模型的安全边界并不是形式化的 invariant,而是 RLHF 与人类标注共同压出来的统计习惯。jailbreak 并不篡改参数,只是用提示词在语义空间里撬开了对齐的接缝,让模型“想起”自己原本就被训练出来的多种响应倾向。
这意味着问题不是某个漏洞,而是整套安全机制缺乏可验证的语义基础。只要 capability overhang 还在,任何靠文字护栏或红队测试堆出来的“拒绝策略”都可能被重新编码。下架当然合理,但它只是止血,不是治疗。
所以监管如果只会事后叫停,跟修电脑只懂重装系统没什么两样。真正该做的,是把 refusal 做成可被证明、可被审计的性质,而不是每次依赖舆论和召回。也许未来我们需要一种“安全编译器”,让伦理约束在模型结构里就变成 type