视频 RLVR 中的捷径放大现象:基于感知不确定性坍缩的分析与 BSPO 方法
研究发现视频 RLVR 训练存在捷径放大效应,模型越来越倾向文本先验答案而非视觉证据,表现为感知不确定性坍缩——答案分布持续锐化但视觉证据带来的不确定性下降逐渐减弱。
AI 安全方向的论文、会议、比赛、教程与资料,按内容形态筛选,支持搜索。
研究发现视频 RLVR 训练存在捷径放大效应,模型越来越倾向文本先验答案而非视觉证据,表现为感知不确定性坍缩——答案分布持续锐化但视觉证据带来的不确定性下降逐渐减弱。
研究提出 CausalCoT 推理框架,将问题分解为原子子问题的有向无环图,每个节点仅在包含其直接因果父节点的隔离上下文中求值,以马尔可夫结构切断对非父节点内容的注意力通路。在多个推理基准上,CausalCoT 在保持竞争力预测性能的同时,将中间推理步骤的因果敏感性较最强基线平均提升 12 个百分点、最高提升 21 个百分点。结构化依赖图还支持测试时干预,局部修正可沿下游推理链可预测地传播。
论文用 601 组经审计、含天城文与拉丁文写法的身份对,在问题与关系固定条件下研究多语言模型对同一人名不同文字写法的判断差异。Qwen2.5-7B 在马拉地语提示下同人准确率从拉丁文的 35.1% 降至天城文的 8.5%,而异人准确率保持在 98% 以上;在 374 组马拉拉姆语身份对上复现该效应,同人准确率降至 5.3%,但 AUROC 仍达 0.925。
SyLares 将免编译补丁存在性测试重构为神经符号推理,由 LLM 充当神经特征提取器生成符合规范的 SMT-LIB 输入,最终判定交给符号 Z3 求解器。其前作 Lares 将 LLM 与 SMT 求解器作为两条并行决策通道,符号通道仅在 20% 代码案例中成功,其余回退到 LLM 裁决,易产生幻觉且两通道无法互相增强。