Kasra Rahjerdi那组APK测试数据刚看完,说实话,GPT-5.5拿最高成功率我并不意外,但细想下来,这更像是长上下文里养出来的防御性链式推理,靠着隐式安全微调和大力出奇迹把漏洞硬扫过去,未必是通用推理真上了台阶。反倒是Deepseek V4 Pro用最低成本搞定,这事更有嚼头——结构化提示压缩再加个轻量验证模块,就能在特定场景下替代暴力推理,提示工程是不是正在从堆参数转向精对齐?
但测试环境本身也让我打问号。图书评论APK不是典型文本场域,模型要处理的不是自然语言对话,而是二进制行为意图。现在的大模型普遍缺一个漏洞语义锚点,提示空间和行为空间根本对不上号,这时候测安全,说到底测的是对齐度,不是真理解。从某种角度看,这种错位可能比漏洞本身更危险。
疫情期间在国外被困半年,最深的感受就是,系统在非预期环境里崩掉,从来不是哪颗螺丝松了,而是整条链子每个环节都偏了一点。换到AI这儿,逻辑好像也差不多。所以我想问,成本优先和准确率优先,到底哪个更能代表下一代模型的方向?