边缘 VLM 物理对抗鲁棒性统一评估框架:紧凑 grounding VLM 与目标检测器同样易受对抗补丁攻击
研究提出统一指标 cASR(条件攻击成功率),在匹配灰色遮挡物下比较紧凑 grounding VLM 与目标检测器对行人佩戴对抗补丁的检测逃逸情况,发现 VLM 可与检测器同样脆弱。失败模式主要与模型输出格式而非架构家族相关,其中位移与替换会返回高置信度、格式完整的框,仅遗漏对下游系统可见,因而更危险。分布偏移下,原本以遗漏为主的 VLM 会转向更多位移/替换失败。
AI 安全方向的论文、会议、比赛、教程与资料,按内容形态筛选,支持搜索。
研究提出统一指标 cASR(条件攻击成功率),在匹配灰色遮挡物下比较紧凑 grounding VLM 与目标检测器对行人佩戴对抗补丁的检测逃逸情况,发现 VLM 可与检测器同样脆弱。失败模式主要与模型输出格式而非架构家族相关,其中位移与替换会返回高置信度、格式完整的框,仅遗漏对下游系统可见,因而更危险。分布偏移下,原本以遗漏为主的 VLM 会转向更多位移/替换失败。
Omni-UBench 是首个面向全模态大语言模型(OLLM)护栏的综合评测框架,从安全、实用性和可靠性三个维度评估护栏模型,收录来自 35+ 异构来源的 183k+ 样本,覆盖文本、图像、音频、视频及其跨模态组合,并按统一风险分类体系标注。
MPIDetector 是一个 LLM-as-a-judge 风格的多模态提示词注入检测框架,通过 few-shot In-Context Learning 与结构化 prompt 模板让模型审查输入的语义意图,而非依赖签名或困惑度匹配。
一项新研究显示,无需训练、无需付费 API 的本地开源模型可以破解 Google reCAPTCHA 视觉挑战,在 500 次真实会话中达到 92.6% 的会话成功率。