arXiv· Oliver Weißl·· 7 天前推荐指数55
MoST:基于搜索的视觉语言模型模态敏感性测试框架
Search-Based Testing of Modality Sensitivity in Vision Language Models
AI 导读
论文提出 MoST,一个针对视觉语言模型(VLM)的黑盒测试框架,通过比较仅图像、仅文本和联合扰动来刻画模态敏感性,使用多目标搜索选择并组合扰动、调整其严重度,在限制图像与提示词改动幅度的同时寻求预测性能下降。
来源:arXiv · arxiv.org