The Decoder· Jonathan Kemper·· 4 小时前精选AI 评分71
研究:花哨的编码智能体框架只增加成本,不提升效果
Fancy harnesses make coding agents more expensive but not better, study finds
AI 导读
一项研究让 Qwen3.6、Qwen3.8、Deepseek-V4-Flash、GLM-5.3-Flash 和 HY4-Preview 在 Claude Code、OpenCode、mini-SWE-agent 三种框架下跑 SWE-bench Verified,发现在 447 个任务上最重和最轻的框架通过率相差不到两个点,属于统计等价。
推荐理由
研究用同一批模型和任务对比三种编码智能体框架,发现换框架带来的分数变化与简单重跑相当,成本却可差三倍。
来源:The Decoder · the-decoder.com