arXiv· Ganni Galea Curmi·· 10 天前推荐指数58
harness 对 LLM 漏洞发现影响多大？24 组模型配置的多模型研究
How Much Does the Harness Matter, and for Whom? A Multi-Model Study of Context in LLM-Driven Vulnerability Discovery
AI 导读
该论文用开源 harness 在生产代码库上测试 24 组模型与运行器配置，在 265 个已确认安全根因中，覆盖最广的两组配置合计发现 60.4%，14.3% 的根因仅被单一模型发现，没有任何配置覆盖全部发现。
来源：arXiv · arxiv.org