跳到正文

看学术

AI 安全方向的论文、会议、比赛、教程与资料,按内容形态筛选,支持搜索。

分类筛选展开
共 528 条 · 更新于 15:39
10月20日周二
  1. arXiv18

    隐藏整数反馈的精确编译与资源定律

    研究针对隐藏随机舍入下连续整数发布的隐私损失耦合问题,提出在可预测带符号单位参与且完全观测物理输出的理性反馈机制。保持完整进位直至观测回波同步世界,可在任意固定预算 C≥2 下实现精确有限律点编译,支撑宽度指数为 3C-2;提前释放承诺则形成单调层级,在某一固定离散高斯下,0.09 的损失容限需要全部四项承诺。

  2. arXiv24

    差分隐私下可调控多元关系保留的精确衰减公式

    论文针对随机化响应实现的差分隐私,推导出多元交叉矩的精确衰减公式:在属性级随机化且整体分布随机化由 Kronecker 积刻画时,匿名数据集涉及不同属性的任一交叉矩等于原始交叉矩乘以衰减参数,该参数由分配给各属性的隐私预算份额决定。数值示例显示,相同的总预算可产生显著不同的协方差保留效果,高阶交互的乘性损失也因此被显式表达,可支持以分析优先级为导向的机制设计。

  3. arXiv66

    Connection Escrow:在 eBPF 内核层扣住 AI Agent Pod 出站连接直至隔离验证器放行

    论文提出 connection escrow 机制,用 98 条指令的 eBPF 程序挂在 Pod 的 cgroup 上,把受监管 Pod 的每条出站 TCP 连接扣在内核 connect() 路径中,在任何数据包生成前拦截。

  4. arXiv44

    超越攻击成功率:面向迭代式 LLM 越狱评估的成本感知指标 ASR_STEP

    研究提出 ASR_STEP 指标,在保留二元成功判定的同时对受害模型的额外调用进行惩罚,以弥补传统攻击成功率(ASR)不计重复调用的缺陷。在 JailBreakBench 上对三个模型家族评估显示,GCG 折扣后得分下降 7.0–8.7 个百分点,PAP 保持不变,PAIR 的折扣区间为 3.4–12 个百分点,说明不同迭代策略的“步数”含义不同。

  5. arXiv12

    DM-RSA-OAEP:基于物理多样性的双模数故障检测对策形式化分析

    DM-RSA-OAEP 是修复版双模数 RSA 变体,论文为其给出随机预言机模型下完整的 IND-CCA2 安全证明,安全性上界受较弱 RSA-OAEP 实例约束并给出显式模拟损失。作者还提出覆盖计算、密钥与验证故障(含 safe-error 攻击)的故障检测定理,并分析物理多样性假设被破坏(单芯片共模故障)时该对策失效。论文明确将其定位为具备可证明检测保证的故障对策,而非计算上更强的 RSA。

  6. arXiv18

    Proof-of-ML-Inference(PoML):用机器学习推理替代哈希算力的共识协议

    研究者提出 Proof-of-ML-Inference(PoML)共识协议,让矿工在共识过程中执行用户请求的机器学习推理,以替代比特币式 PoW 中无其他用途的哈希计算。论文明确了 ML 推理安全替代哈希工作所需的计算假设并加以形式化,给出 LLM 与扩散模型满足这些假设的证据,并将协议安全性归约到 Bitcoin Backbone 模型。模拟环境中 PoML 的出块速率接近其校准的出块时间目标。

  7. arXiv39

    可问责的部分理解:保障 Agentic 系统的认知攻击面

    论文提出“可问责的部分理解”(APU)框架,用于应对 Agentic AI 系统中软件自主读写、解释并授权安全相关行为所带来的认知攻击面。作者给出四类相互作用的攻击分类(针对意图解释、证据生产与消费、委托权限范围、人类监督者理解),并规定 APU 的六项必要条件与五项设计原则。

  8. arXiv41

    CrypSteer:用共享修复方向引导代码模型安全使用加密 API

    研究者构建覆盖四种编程语言、十类加密 API 误用类别的 48,000 对匹配程序,发现修复向量按误用类别而非语言聚类,并提出 CrypSteer——在模型权重不变的情况下,于生成时向内部激活加入每个模型一条共享方向,使目标安全率在五种模型上较未引导生成提升 5.28–15.00 个百分点。

  9. arXiv18

    建筑软件依赖安全跨生态研究:904 个 GitHub 仓库中仅 54.6% 可完成漏洞评估

    一项针对 904 个建筑相关 GitHub 仓库的跨生态实证研究发现,仅 494 个(54.6%)仓库能完成依赖漏洞评估,依赖可见性存在明显缺口。成功扫描的仓库中 395 个(80.0%)含至少一个已公布漏洞的依赖版本,97.2% 的受影响仓库存在 High 或 Critical 级风险。

  10. arXiv54

    SWE-Residual:评测编程智能体的起始状态鲁棒性

    作者提出 SWE-Residual 基准,用于评测编程智能体的起始状态鲁棒性,即任务起点已包含前序工作时能否维持表现。该基准从 DeepSWE 和 Terminal-Bench 的 111 个任务中构造 198 个 Residual State,每个状态是前序智能体提交完成但隐藏测试仍失败后的环境,被评智能体只拿到原始请求和该状态。

  11. arXiv58

    SPLASH:用对比审计压力检测并定位生成代码中的安全幻觉

    作者提出 SPLASH 方法,通过对比生成程序在安全审查与风格审查下的 teacher-forced 对数概率得到 audit pressure,用于在模型候选程序中挑选安全代码并定位漏洞语句,无需模型训练、CWE 专用规则或生成模型内部访问。

  12. arXiv32

    Game of Phones:用博弈论与 LLM 在“Bot Wars”中反击电话诈骗

    研究者提出一个博弈论框架,让 LLM 无需微调即可通过上下文经验学习反诈骗策略,将诈骗者与反诈机器人互动建模为双人博弈,并以纳什均衡作为评估学习行为的正式基准。在 300 段模拟对话和三种 LLM 架构上,自适应策略选择相比非自适应基线将纳什均衡对齐度提升 28.9-79.7%。代码与含逐轮策略标签和效用分数的 300 段对话标注数据集已开源,成果获 ECML PKDD 2026 接收。

10月19日周一
  1. 安全paper71

    论文提出说话人激活后门 SAB:以目标人声为触发器,Whisper 与 Parakeet 后门成功率最高 97.0%

    论文提出 Speaker-Activated Backdoor(SAB)设定,攻击者在微调阶段植入后门,以目标说话人的自然语音作为触发器,无需接触推理时音频。两阶段微调方法仅用两分钟目标说话人真实音频,就在 Whisper-medium 和 Parakeet 上分别取得 90.2% 和 97.0% 的后门成功率,误报率为 1.7% 和 0%。

  2. 安全paper37

    Guided Diffusion:面向可信合成文本生成的扩散语言模型框架

    Guided Diffusion 提出一种隐私合成文本生成框架,利用扩散语言模型的可引导性,通过引导采样与重掩码让去噪过程生成符合目标语义分布的流畅文本。语料语义嵌入经差分隐私保护后,生成即为后处理,DP 保证自然延续到合成文本。

  3. 安全paper74

    AutoRedClaw:面向 claw 式 Agent 的自动化红队框架与 RedClaw-Bench 基准

    AutoRedClaw 是一个面向持久化 claw 式 LLM Agent 的自动化红队框架,可同时生成端到端状态投毒攻击及其运行所需的任务环境,并据此构建 330 例的 RedClaw-Bench 基准。

  4. 安全paper47

    PROVISO:面向安全 LLM Agent 的溯源感知动作选择控制器

    PROVISO 是一个位于动作提议与执行之间的 LLM Agent 控制器,用溯源类型化记忆区分可信用户上下文与不可信的工具或技能输出,并在提交前将提议动作与备选动作进行对比。

10月18日周日
  1. arXiv41

    编码智能体的过度防御始于静默分叉:ForkDPO 用行为分歧信号纠偏

    研究发现编码智能体的过度防御行为始于“静默分叉”——即所有后续动作都通向同一结果的回合,前沿模型在隐式预算下于此类分叉点最多 91% 的决定性动作中选择不成比例的分支。

  2. Hugging Face 每日论文

    How Much Feedback Is Needed to Break Template Protection? The Geometric Vulnerability of Biometric Authentication

    Biometric authentication systems increasingly use privacy-preserving mechanisms to protect sensitive templates. However, the authentication interface itself may still leak information that enables reconstruction attacks. Prior attacks exploit released similarity scores, whereas more advanced systems reveal only the binary accept/reject decision. This binary feedback provides substantially less information, making template reconstruction far more challenging. In this work, we introduce query-efficient reconstruction attacks under extremely limited feedback, addressing two key limitations of prior attacks. First, we introduce the first attack that reconstructs protected biometric templates using only authentication success/failure feedback by exploiting the geometric constraints of biometric authentication. Second, we introduce distribution-aware query-efficient reconstruction methods for score-releasing systems, achieving a more realistic threat model by reducing the number of required queries by a factor of 5times compared to recent prior score-based attacks. Finally, we combine these two insights by incorporating a pretrained facial diffusion prior into our geometric binary attack, reducing the number of required queries by a factor of 5times. Our findings reveal a fundamental security limitation of biometric authentication: independently of the template protection mechanism, the authentication process itself exposes geometric information that can enable perfect template reconstruction up to numerical precision. Moreover, the distribution of biometric templates can be leveraged to make significantly more effective reconstruction attacks.

  3. arXiv40

    CAT-RAG:用类别感知的智能体检索改进安全代码生成

    CAT-RAG 是一个智能体式安全类别感知检索增强代码生成框架,用语言特定的安全类别替代 CWE 级检索,可作为独立安全层或 RACG 管线的即插即用附加组件,无需修改底层模型。在 CyberSecEval 上,其安全代码生成改进幅度接近当前最优方法的两倍(23.57% vs. 12.11%),同时减少 41.71% 的 token 开销。评估还覆盖 CodeGuard+ 与 HumanEval。

  4. arXiv52

    UVA 方法让代码 Agent 提问时不泄露私有代码

    作者提出 utility-verified abstraction(UVA),训练本地代码 Agent 在向更强的云端模型咨询时,用角色和类型描述私有实体,同时保留专家所需的技术细节。在仓库级 issue 修复任务上,训练后的 Agent 解决 37.6% 的问题,同一模型单独工作为 25.3%;其提问泄露的私有实体比未训练时少 3.7 倍,逐字代码少 1.4 倍。

10月17日周六
10月16日周五
  1. ShortSpan65

    研究显示推荐系统语言嵌入可还原物品身份并致用户再识别

    论文 Encoded but Exposed 研究推荐系统中暴露的物品级语言嵌入是否泄露真实身份,作者 Linda Beková 和 Rodrigo Alves 用余弦相似度匹配即可在 MovieLens 32M 和 GoodReads 两个数据集、六个 sentence-transformer 编码器上以较高 MRR 恢复物品身份,无需训练或模型反转。

10月15日周四
  1. ShortSpan78

    CoRedSkill 论文:通过 AST 改写将恶意操作拆分到多个 Agent skills 以规避逐包审计

    论文提出 CoRedSkill,一种针对可复用 Agent skills 的组合式红队方法:把恶意操作拆分到多个协作 skill 中,借助抽象语法树(AST)改写任务辅助函数,同时保持接口与可见任务逻辑不变,使单个 skill 包看起来无害,而在 Agent 按序调用时拼装成完整攻击。

  2. ShortSpan76

    TRACER 论文揭示间接提示词注入成功率随呈现信道变化

    论文 TRACER: Trace-Regularized Training Against Indirect Prompt Injection(作者 Kshitij Mishra、Salem Lahlou、Nils Lukas)发现,同一段间接提示词注入载荷作为聊天后续消息时成功率 18%,放入检索内容中则达 53%。

10月14日周三
  1. ShortSpan74

    研究论文揭示 schema 合法判定可被用于劫持应用决策

    论文《Nudge the Judge: Uncovering Program Decision Hijacking in Real-World Jev Applications》提出 Jev 程序决策劫持(JPDH)风险:攻击者构造的输入可让 Jev 判定模型返回格式完全合法但错误的判定,从而翻转应用代码执行的决策。

10月13日周二
  1. ShortSpan74

    arXiv论文:多智能体LLM系统中拓扑结构决定受保护信息流向哪些未授权接收方

    论文《When Agents Talk, Secrets Travel》研究多智能体LLM系统(MALS)中由常规协调转发导致的隐私泄露,无需攻击者介入。作者在coordinator-worker、peer-to-peer、hierarchical三种拓扑下评估485个场景,插桩7个通信通道,产生8,730次执行记录。

10月12日周一
  1. ShortSpan78

    ToFu 模糊测试揭示 MCP 工具普遍不校验自身描述承诺的输入规则

    研究团队提出工具感知的模糊测试框架 ToFu,针对 LLM-编排层-工具信任边界,在 273 个 MCP 服务器、3405 个工具上发现 343 个工具存在经人工确认的漏洞,涵盖路径遍历、日志注入、SSRF、OS 命令注入等 CWE 类别。

10月10日周六
10月8日周四
  1. ShortSpan66

    研究:封闭意图词表而非护栏才是阻止被劫持 SOC Agent 的关键

    一篇 arXiv 论文提出面向 SIEM/XDR 的受限动作架构:SOC 分析 LLM 被限制在封闭意图词表内,命令由管理器按 OS 模板展开并逐参数校验,外层再套 NeMo-Guardrails 代理。