安全paper·· 12 天前推荐指数47
超越攻击成功率:面向迭代式 LLM 越狱评估的成本感知指标 ASR_STEP
Beyond Attack Success Rate: Cost-Aware Metric for Evaluating Iterative LLM Jailbreaks
AI 导读
论文提出 ASR_STEP 指标,在保留二元成功判定的同时惩罚对受害模型的额外调用,以修正标准攻击成功率(ASR)忽略查询次数的问题。在 JailBreakBench 上对三个模型家族评估显示,GCG 折扣后分数下降 7.0–8.7 个百分点,PAP 保持不变,PAIR 在步数预算下折扣幅度为 3.4–12 个百分点。
来源:安全paper · aisecurity.ninja