跳到正文

看学术

AI 安全方向的论文、会议、比赛、教程与资料,按内容形态筛选,支持搜索。

分类筛选1展开
共 258 条 · 更新于 15:39
10月18日周日
10月17日周六
10月16日周五
10月15日周四
  1. ShortSpan78

    CoRedSkill 论文:通过 AST 改写将恶意操作拆分到多个 Agent skills 以规避逐包审计

    论文提出 CoRedSkill,一种针对可复用 Agent skills 的组合式红队方法:把恶意操作拆分到多个协作 skill 中,借助抽象语法树(AST)改写任务辅助函数,同时保持接口与可见任务逻辑不变,使单个 skill 包看起来无害,而在 Agent 按序调用时拼装成完整攻击。

  2. ShortSpan76

    TRACER 论文揭示间接提示词注入成功率随呈现信道变化

    论文 TRACER: Trace-Regularized Training Against Indirect Prompt Injection(作者 Kshitij Mishra、Salem Lahlou、Nils Lukas)发现,同一段间接提示词注入载荷作为聊天后续消息时成功率 18%,放入检索内容中则达 53%。

10月14日周三
  1. ShortSpan74

    研究论文揭示 schema 合法判定可被用于劫持应用决策

    论文《Nudge the Judge: Uncovering Program Decision Hijacking in Real-World Jev Applications》提出 Jev 程序决策劫持(JPDH)风险:攻击者构造的输入可让 Jev 判定模型返回格式完全合法但错误的判定,从而翻转应用代码执行的决策。

10月12日周一
  1. ShortSpan78

    ToFu 模糊测试揭示 MCP 工具普遍不校验自身描述承诺的输入规则

    研究团队提出工具感知的模糊测试框架 ToFu,针对 LLM-编排层-工具信任边界,在 273 个 MCP 服务器、3405 个工具上发现 343 个工具存在经人工确认的漏洞,涵盖路径遍历、日志注入、SSRF、OS 命令注入等 CWE 类别。

10月10日周六
10月8日周四
  1. ShortSpan66

    研究:封闭意图词表而非护栏才是阻止被劫持 SOC Agent 的关键

    一篇 arXiv 论文提出面向 SIEM/XDR 的受限动作架构:SOC 分析 LLM 被限制在封闭意图词表内,命令由管理器按 OS 模板展开并逐参数校验,外层再套 NeMo-Guardrails 代理。

10月7日周三
10月6日周二
  1. ShortSpan47

    研究:强迁移对抗攻击在同等成功率下反而更隐蔽,固定扰动预算评测掩盖了这一优势

    研究者提出 ST 插件式原始-对偶正则化包装器,只改现有迁移攻击的投影/更新步,在 ImageNet 兼容的 1000 张图像、ε∈[2/255,32/255] 扫描下让 7 种基础攻击的 ASR-不可感知性曲线整体外移。

9月30日周三
  1. ShortSpan62

    综述:被投毒的 MCP 工具描述可劫持 Agent 的工具选择

    一篇关于 Model Context Protocol 生态安全的综述指出,攻击者无需接触用户提示词,仅靠精心编写的工具描述即可影响 Agent 选择和执行哪些工具,综述汇总的实验里这类工具选择劫持在最多 90.89% 的尝试中成功。

9月23日周三
9月21日周一
  1. ShortSpan58

    HE-Guardrail 让越狱护栏在同态加密下运行,加密版与明文决策一致率 99.7%

    研究提出 HE-Guardrail,在同态加密的提示词上运行越狱护栏,服务器无需看到明文即可决定返回模型回答还是固定拒答。加密版护栏与对应明文护栏的决策一致率为 99.7%,但无护栏时宏平均越狱成功率为 11.0%,Llama Guard 仅降至 7.1%,JBShield 仍为 11.0%,GradSafe 为 10.8%。

9月17日周四