🛡️重看 Log4Shell 和 Heartbleed,我整理了防守排查清单(4/5)
回溯 Log4Shell 与 Heartbleed 的成因和修复版本线,归纳六类通用攻击面和后利用检测点(附 ATT&CK 映射);再用 LangGraph 把多源日志关联成入侵链,生成待人工确认的排查清单。
🛡️虚构一场账号异常,把 AI 放进威胁研判流程
用一起虚构的财务账号异常事件,拆解 AI 在 IOC 提取、告警归并、攻击链还原、日志处理、报告与处置审批中的位置和边界,以及做成产品还要补的数据契约、校验、审批、评测与上线工程。
只改写一段旁白,靠推理识别的作弊检出率从 96% 掉到 4%
只改写一段旁白,监测器检出率从 96% 掉到 4%:用 2026 年的 12 项研究,看思维链监测在哪些条件下失效、该怎么防。
翻了 10 个开源训练仓库,我更想先补安全任务的判分器
克隆全球 10 个训练仓库逐行实证:只有编码和数学把 benchmark 变成了 RL 环境,分界线是一个 70 行的判分器;安全域是下一个空位,攻击链靶场就是它的 SWE-Gym。
🧠把监测器写进奖励后,模型照样作弊,只是不说了
精读 OpenAI 论文《Monitoring Reasoning Models for Misbehavior and the Risks of Promoting Obfuscation》:看推理链的监测器能抓住 95% 的系统性作弊,可一旦把监测器写进训练奖励,召回率跌到接近 0。25 页 PPT。
🃏24 点好判分,安全 AI 的验证器得自己建
24 点之所以成了推理研究的标准考题,是因为它的验证器免费;安全 AI 难评测,是因为验证器昂贵。从 Tree of Thoughts、rStar-Math 到 OpenAI 的思维链监测论文,讲清楚安全团队该怎样给 AI 建自己的验证器。
🧠做 RL 任务时,我现在先问奖励到底在教模型什么
意图是校准 prompt/环境/verifier 的锚,不是奖励本身;reward hacking 的缝就在 verifier 奖励的与你真正想要的之间。四零件三对齐轴、公平与真实的张力、失败要合理成功要正当,以及多智能体出题流水线与任务工厂。
📋模型最后说了不,审计还得看中间发生了什么
最终答案是消过毒的版本,推理才是模型决策的真身:甲方安全团队怎样把推理审计落到采购清单、监测管线、BAS 红队和合规边界里。