AfterDeleteBench 审计 LLM Agent 删除记忆后的信息残留
AfterDeleteBench 是一项针对固定权重 LLM Agent 外部持久记忆的受控行为审计:对每个合成密钥,比较一个先暴露后删除源记录的 Agent 与一个从未见过该密钥的配对 Agent。
AI 安全方向的论文、会议、比赛、教程与资料,按内容形态筛选,支持搜索。
论文提出 AgentTrace,通过可观测的执行轨迹识别黑盒 LLM Agent 背后的基础模型。该框架注入结构上存在歧义的探针,在严格的工具接口处触发对分词敏感的序列化失败,再用轻量级 Markov 链对后续多步修复轨迹建模,在对抗性身份伪装下达到 96.0% 归因准确率,并能区分共享相同分词器的同家族变体(如 Llama-3 8B/70B),且对 prompt 混淆和温度缩放保持稳健。