AICSO.AI汇总·· 9 小时前精选推荐指数78
香港理工大学等提出 SINGED 基准,检验工具型智能体能否识别输出正确但违反任务契约的第三方实现
SINGED 基准:正确输出不代表执行安全
AI 导读
香港理工大学与杭州电子科技大学研究者提出「功能赝品」概念并构建 SINGED 基准,检验工具型智能体能否识别输出正确、却附带任务契约禁止效应的第三方实现。7549 次审计试验覆盖 14 个模型家族的 20 个版本和 8 种智能体配置,当赝品排在候选第一位时 45% 的执行踩中它,而只看输出,这些被攻陷的执行全部显示任务成功。
推荐理由
原文给出赝品排首位时45%踩中率与强制三候选对比的干预效果,读者可据此理解输出正确不等于执行安全这一风险维度。
来源:AICSO.AI汇总 · mp.weixin.qq.com