跳到正文
arXiv cs.SE· Jens Lehmann, Sahar Vahdati·· 2 小时前AI 评分50

LLM 能否改进自身的 harness?一项针对 ARC-AGI-3 的受控研究

Can LLMs Improve Their Own Harness? A Controlled Study on ARC-AGI-3

AI 导读

研究在 ARC-AGI-3 上检验前沿模型能否自主构建并改进任务 harness:每个模型通过固定的编码引导流程搭建完整 harness,在 5 个开发游戏上运行,并对整个代码库做两次修订,所有版本都在 20 个不参与适应的游戏上评测。

来源:arXiv cs.SE · arxiv.org