AfterDeleteBench 审计 LLM Agent 删除记忆后的信息残留
AfterDeleteBench 是一项针对固定权重 LLM Agent 外部持久记忆的受控行为审计:对每个合成密钥,比较一个先暴露后删除源记录的 Agent 与一个从未见过该密钥的配对 Agent。
AI 安全方向的论文、会议、比赛、教程与资料,按内容形态筛选,支持搜索。
Yikai Zhao 的论文指出,主流文档转换器都会丢失作者通过文本外观编码的语义线索,使 Agent 在识别政策文档中被作者特别标注的要求时,micro F1 从 0.690 降至 docling 的 0.150 和纯文本的 0.075,该差距在 5 个 Claude 模型和 GPT-5.6 上均可复现。
AutoRedClaw 是一个面向持久化 claw 式 LLM Agent 的自动化红队框架,可同时生成端到端状态投毒攻击及其运行所需的任务环境,并据此构建 330 例的 RedClaw-Bench 基准。