arXiv· Wenhan Wang·· 8 天前推荐指数46
LLM 生成的形式化规范是否忠实于需求？一项双模态规范生成实证研究
Are LLM-Generated Formal Specifications Faithful to Their Requirements? A Study on Bimodal Formal Specification Generation
AI 导读
一项针对 LLM 生成形式化规范的实证研究构建了 1,403 个 C 程序的 benchmark，用 Frama-C 验证评估 ACSL 规范生成，发现当代码实现有误时，LLM 可能生成过弱或被实现误导的规范而错误通过验证，且高级提示词方法无法完全缓解。
来源：arXiv · arxiv.org