arXiv· Saifullah Saifullah·· 3 天前推荐指数45
DocXEval：多模态文档理解可解释性系统评测框架
DocXEval: A Systematic Evaluation of Explainability in Multimodal Document Understanding
AI 导读
DocXEval 提出首个面向多模态（文本、版面、图像）文档理解的可解释性（XAI）评测框架，系统评测 13 种 XAI 方法、3 类任务、8 个数据集、4 个模型与 17 项评测指标，发现仅少数方法在全部指标上表现稳定，其中 Occlusion 整体最忠实、最可解释。元评测显示多项忠实度与复杂度指标存在中到强一致性，同时识别出部分不可靠指标。代码已公开发布以支持可复现性。
来源：arXiv · arxiv.org