跳到正文
Hugging Face Daily Papers·· 6 天前精选AI 评分55

Harness-Delta Attribution:拆解智能体框架进化带来的性能增益

Harness-Delta Attribution: Dissecting Gains From Harness Evolution

AI 导读

论文提出 Harness-Delta Attribution(HDA)评估协议,把智能体框架进化带来的性能增益拆分为过拟合、测试时扩展和残余可泛化改进三部分。作者在 11 个执行模型和 3 个框架进化框架上测试数学、编码、创造性和智能体任务,在 21 个搜索集增益统计显著的设置中,过拟合和测试时扩展平均分别解释 54% 和 14% 的增益,14 个设置中两者合计超过 50%。

推荐理由

论文把智能体框架进化带来的涨分拆成过拟合、测试时扩展和可泛化改进三部分,为评估这类优化提供了可迁移的归因方法。

来源:Hugging Face Daily Papers · huggingface.co