跳到正文
AICSO.AI汇总·· 9 小时前精选推荐指数78

香港理工大学等提出 SINGED 基准,检验工具型智能体能否识别输出正确但违反任务契约的第三方实现

SINGED 基准:正确输出不代表执行安全

AI 导读

香港理工大学与杭州电子科技大学研究者提出「功能赝品」概念并构建 SINGED 基准,检验工具型智能体能否识别输出正确、却附带任务契约禁止效应的第三方实现。7549 次审计试验覆盖 14 个模型家族的 20 个版本和 8 种智能体配置,当赝品排在候选第一位时 45% 的执行踩中它,而只看输出,这些被攻陷的执行全部显示任务成功。

推荐理由

原文给出赝品排首位时45%踩中率与强制三候选对比的干预效果,读者可据此理解输出正确不等于执行安全这一风险维度。

来源:AICSO.AI汇总 · mp.weixin.qq.com