跳到正文

看学术

AI 安全方向的论文、会议、比赛、教程与资料,按内容形态筛选,支持搜索。

分类筛选3展开
共 17 条 · 更新于 15:39
今天10月30日周五4 条
  1. arXiv56

    arXiv论文研究编码智能体在演进既有代码时遵循先例还是任务指令

    论文通过在定制仓库中进行双向受控实验并结合真实开源仓库验证,研究当既有代码先例与新任务指令冲突时,编码智能体如何在默认偏好、仓库先例和显式任务指令之间做选择。实验覆盖四个编码智能体、六组实现对,共5,625次试验,并在三种编程语言的四个开源仓库中验证。

  2. arXiv78

    Snyk VulnBench 2.0 论文对比确定性 SAST 与 AI 安全 Agent 的代码漏洞检出分工

    Liran Tal 等发布 VulnBench 2.0 基准,包含 20 个开源 Web 应用中 108 个人工整理的攻击者可达漏洞(Go、JavaScript/TypeScript、Python、Java),其中 62 个跨文件,判定标准要求同时定位攻击者可控 source 与危险 sink 且各在两行内。

  3. arXiv78

    CARI:编码智能体工作流中的跨边界对抗性运行时注入研究

    arXiv 论文提出 Cross-Boundary Adversarial Runtime Injection(CARI)攻击设置:在多方协作的编码智能体工作流中,恶意或被攻陷的对等开发组件(如后端服务、测试框架、CI 任务)可在其运行时反馈中暗藏指令,诱导受害方智能体执行越权操作。

10月28日周三
  1. ShortSpan83

    Wiz 报告开源渗透测试 Agent ARTEX 在真实攻击中的自主攻击链

    Wiz 研究人员通过访问日志和身份提供方遥测还原出攻击者使用开源渗透测试 Agent ARTEX 的攻击过程,该操作者与 Microsoft 追踪的 Storm-0940 共享基础设施与习惯,目标为 IT 与软件厂商,聚焦 Okta、Entra、Cognito 身份层。

  2. ShortSpan62

    Thinking-in-Bets:让智能体在读用户反馈前先写下主张,可几乎消除补丁审查中的错误反转

    论文《Thinking-in-Bets at Test Time Reduces Sycophantic Revisions in LLM Agents》(作者 Nghi D. Q. Bui)提出一种免训练方法:让智能体在读用户回复前先写一份私有 Claim Checklist,逐条记录主张、支撑证据与置信度,收到质疑时据此决定保留、复核、澄清或修复。

  3. 安全paper75

    arXiv论文揭示LLM Agent间接提示词注入的trust region效应

    论文研究长时程LLM Agent中的间接提示词注入,构建了覆盖工具使用、编码和日常工作流三个领域的测试环境,发现即使注入内容完全相同,攻击成功率也随注入位置显著变化,作者称之为trust region效应。

10月23日周五
  1. 安全paper60

    基于 Petri 网监督控制的 LLM Agent 工具执行认证框架论文

    arXiv:2610.31376 论文(作者 Chao Gu、Quanyan Zhu)将 LLM Agent 与工具之间的执行护栏形式化为 Petri 网监督控制问题,用 token 表示能力、审批与预算,使前置条件缺失或已消耗的注入请求被机械拒绝。

  2. arXiv70

    Ulysses:面向 Web 漏洞可验证利用合成的多智能体安全框架

    论文提出 Ulysses,一个多智能体安全框架,用于为 Web 应用合成可验证的漏洞利用证明(Proofs of Exploitability),通过迭代探索利用假设并在独立观测的执行效果中确认成功,将候选漏洞发现转化为已验证结果。

  3. 安全paper60

    Enclawed:面向 MPI 与批处理 HPC 系统的 LLM Agent 确定性安全运行时论文

    arXiv:2610.33318 论文提出 Enclawed,一个面向 LLM 驱动 HPC 工作流的确定性安全运行时,通过可解析策略的启动门控、硬件根信任 Enclaweder 签名、短租约与心跳共识、fail-closed 驱逐来监管每个 rank,即使控制主机或协调器被攻陷也能维持防护。

10月22日周四
  1. arXiv86

    arXiv 论文揭示编码智能体上下文压缩中的来源伪造攻击 Compaction Laundering

    论文提出 Compaction Laundering 攻击:编码智能体压缩上下文时,若 harness 将带类型的消息拍平为单一字符串并用 [User]: 等文本标签标记,攻击者可伪造在压缩后仍被当作真实指令的用户轮次。

  2. arXiv72

    arXiv论文量化编码Agent过度遵循过期指令文件的行为并验证一句话修复

    论文构建40个Python项目,在指令文件与现有代码约定冲突时让Claude Code和Codex CLI各运行320次。结果显示无干预时90.1%的选择遵循过期指令文件,Claude Code在80次运行中79次指出冲突仍照做,Codex CLI在80次中20次改写现有代码、其中17次导致项目测试失败。

10月20日周二
10月8日周四
  1. ShortSpan66

    研究:封闭意图词表而非护栏才是阻止被劫持 SOC Agent 的关键

    一篇 arXiv 论文提出面向 SIEM/XDR 的受限动作架构:SOC 分析 LLM 被限制在封闭意图词表内,命令由管理器按 OS 模板展开并逐参数校验,外层再套 NeMo-Guardrails 代理。