MoST:基于搜索的视觉语言模型模态敏感性测试框架
论文提出 MoST,一个针对视觉语言模型(VLM)的黑盒测试框架,通过比较仅图像、仅文本和联合扰动来刻画模态敏感性,使用多目标搜索选择并组合扰动、调整其严重度,在限制图像与提示词改动幅度的同时寻求预测性能下降。
AI 安全方向的论文、会议、比赛、教程与资料,按内容形态筛选,支持搜索。
论文提出 MoST,一个针对视觉语言模型(VLM)的黑盒测试框架,通过比较仅图像、仅文本和联合扰动来刻画模态敏感性,使用多目标搜索选择并组合扰动、调整其严重度,在限制图像与提示词改动幅度的同时寻求预测性能下降。
论文《A Unified Evaluation Framework of Physical Adversarial Robustness in the Edge VLM Era》评测紧凑视觉语言grounding模型与传统目标检测器在物理对抗样本下的表现,引入条件攻击成功率cASR指标,仅在模型仍能于灰色遮挡下定位人的图像上计分。
Omni-UBench 是首个面向全模态大语言模型(OLLM)护栏的综合评测框架,从安全、实用性和可靠性三个维度评估护栏模型,收录来自 35+ 异构来源的 183k+ 样本,覆盖文本、图像、音频、视频及其跨模态组合,并按统一风险分类体系标注。
MPIDetector 是一个 LLM-as-a-judge 风格的多模态提示词注入检测框架,通过 few-shot In-Context Learning 与结构化 prompt 模板让模型审查输入的语义意图,而非依赖签名或困惑度匹配。
一项新研究显示,无需训练、无需付费 API 的本地开源模型可以破解 Google reCAPTCHA 视觉挑战,在 500 次真实会话中达到 92.6% 的会话成功率。