跳到正文
安全内参·· 5 天前推荐指数67

SRFT 自我反思微调让 Agent 更好抵御提示注入攻击

大模型自我反思微调,让Agent学会抵御未知的提示注入

AI 导读

约翰斯·霍普金斯大学等机构发布论文《Self-Reflection Fine-Tuning》,提出 SRFT 安全训练方法,让模型先采样自身可能的错误动作,再由专家模型分析错误原因与潜在后果,生成反思数据进行监督微调。

来源:安全内参 · secrss.com