arXiv cs.SE· Jialei Li, Dingxian Wang, Xiaoyan Zhao, Yimeng Bai, Xuanyi Zhu, Yang Zhang, Chao Yin, Wentao Shi, Ganesh Prabhu, Karthik Gomadam Rajagopal, Brett Levert, Darvin Yi, Andrew Rabinovich, Zhao Chen·· 3 小时前AI 评分58
SWE-Clar：编码智能体能否澄清不完整需求并交付全新软件
SWE-Clar: Can Coding Agents Clarify Incomplete Client Requirements and Deliver Greenfield Software?
AI 导读
研究者提出 SWE-Clar 基准，用于评估编码智能体在自由职业场景下澄清不完整客户需求并完成代码实现的能力。该基准包含 100 个基于 Upwork 真实软件开发任务的任务，每个任务总付款至少 4000 美元，流程为编码智能体与客户智能体多轮交互后再分别进行代码实现与澄清效果评估，后者使用 512 道配参考回答的问题。
来源：arXiv cs.SE · arxiv.org