跳到正文

看学术

AI 安全方向的论文、会议、比赛、教程与资料,按内容形态筛选,支持搜索。

分类筛选2展开
共 4 条 · 更新于 15:23
今天10月30日周五2 条
  1. arXiv60

    Adversarial Self-Distillation:用自蒸馏提升安全对齐模型的抗对抗扰动能力

    arXiv 论文提出 Adversarial Self-Distillation(ASD),针对安全对齐语言模型仍可被对抗扰动绕过的问题,将模型自身在干净提示下的安全行为蒸馏到受攻击的同一模型在 on-policy 采样访问到的前缀上。实验显示 ASD 相比现有先进防御取得更低攻击成功率,多选题准确率损失很小,并能在模型已给出顺从开头后仍恢复拒绝。

10月23日周五
10月20日周二
  1. 安全paper47

    小规模本地部署 LLM 在法律语境下过度拒答:刑事法律场景中的角色前缀使拒答率上升 2–20 倍

    研究显示,小规模开源权重 LLM 在刑事法律日常任务中,加入“我是辩护律师”“国家最高法院法律顾问”等真实职业身份前缀后,对良性请求的拒答率比无前缀基线系统性上升 2–20 倍。该触发因素并非明显越狱提示,而是用户自然的职业自述;已知的角色扮演越狱前缀效果则因模型而异,部分模型拒答率大幅上升、部分几乎不变。结论基于四个小型模型的良性法律领域提示评测,机制、任务广度与泛化性仍待进一步研究。