跳到正文
arXiv cs.SE· Lu Zhao, Christopher M. Poskitt, David Lo·· 2 小时前AI 评分58

研究:轻量编码智能体中 harness 与模型的搭配影响显著

Pairing Matters: Performance, Failures, and Efficiency in Lightweight Coding Agents

AI 导读

arXiv 论文对 6 个开源 harness 与 3 个轻量编码模型在 100 个 SWE-bench Verified 任务上做全因子评测,共 1800 次运行。

来源:arXiv cs.SE · arxiv.org