arXiv· Zhiyuan Ye·· 9 天前推荐指数22
ExGrad:对抗训练中显式干净梯度相减,超越单纯抑制
ExGrad: Beyond Suppression - Explicit Clean-Gradient Subtraction in Adversarial Training
AI 导读
ExGrad(外推梯度重组)通过构造干净输入、对抗输入与 AWP 梯度并测量其边界响应,在无约束的有界仿射域上求解三变量系数选择问题。在 CIFAR-10 上,负干净系数随仿射半径增大而迅速占主导;将干净系数置零并不足够,适度相减可提升 PGD-20,更强相减则以干净精度换取进一步增益。
来源:arXiv · arxiv.org