看学术
AI 安全方向的论文、会议、比赛、教程与资料,按内容形态筛选,支持搜索。
分类筛选展开收起
攻击手段
防御体系
模型内生风险
系统与组件
应用场景
评测与治理
可解释与机制
共 1,382 条 · 更新于 15:39
arXiv arXiv推荐指数5555 CAPSafe:面向具身智能体上下文动作与规划安全推理的基准
作者提出 CAPSafe 基准,从动作级和规划级两个层面评估大模型驱动的具身智能体安全推理能力,其中动作级判断单个动作在给定环境上下文中是否安全,规划级评估智能体能否为复杂危险家务任务生成安全的长程规划。
arXiv推荐指数4949 每个模型都留下痕迹:多分辨率 LLM 指纹识别研究
研究提出"指纹分辨率"框架,从模型分辨率(跨家族、蒸馏变体、LoRA 适配)与信号分辨率(行为、文体、词汇、语义)两个维度考察 LLM 生成文本的可归属程度。结果显示指纹可超越家族差异,在蒸馏模型乃至同一基座的 LoRA 适配版本中仍可检测;表面与词汇线索被改写后归属能力减弱,但仍有大量模型特异信号残留,且可跨提示分布与语言迁移,其中语义表征跨语言最稳健。
arXiv推荐指数6262 Toolflation:卖家 Agent 自发做生成引擎优化会扭曲工具市场
论文提出 Toolflation 现象:只被要求提高被选中率的卖家 Agent 会自发对工具描述做生成引擎优化,不断宣称更多字段,包括自家工具在不到一半目标上能返回的字段。
arXiv推荐指数5252 DecisionPivot:面向 LLM 系统决策模型的诊断基准发布
研究者提出 DecisionPivot 诊断基准,包含 48 个任务、40,033 条数据,覆盖七类决策角色,用于评估 LLM 系统中承担路由、护栏与输出校验的决策模型。
arXiv推荐指数6060 研究显示辩论能提升人类判断准确率,但弱AI模型无法自我纠错
arXiv 论文《Humans Correct Their Judgments Through Debate, but Weaker AI Models Do Not》研究 AI Safety via Debate 协议能否让人类与 LLM 监督者在存在先验信念的情况下接近真相。