arXiv· Chenxi Huang·· 9 天前推荐指数39
编码智能体为何无法理解系统崩溃?研究提出 source interventions 配对评测方法
Do Coding Agents Understand Why Systems Crash---and Why They Don't?
AI 导读
研究提出 source interventions 方法,用仅差一个 commit、同一输入只在一个源码树上崩溃的配对样本,测试编码智能体是否真能推理执行行为。
来源:arXiv · arxiv.org