跳到正文
热点事件持续更新

SWE-DIVE:多轮编码智能体评测框架

1 篇报道1 个报道来源1 小时前更新

先了解这件事

AI 综述

研究者 Lorenz Brehme 等人提出并开源了 SWE-DIVE,一个面向多轮环境的编码智能体动态交互评测框架。该框架针对的是现有基准的局限:SWE-bench 等基准用格式良好的 GitHub issue 做一次性评测,与真实使用中用户多轮追加需求的方式不同。 SWE-DIVE 通过动态用户模拟来评测编码智能体在多轮交互中的表现。研究者在论文中称,开发该框架是为了评测这类多轮能力。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月22日
  1. arXiv cs.SE
    SWE-DIVE:用动态用户模拟评测多轮编码智能体

    研究者提出 SWE-DIVE,一个面向多轮环境的编码智能体动态交互评测框架,指出 SWE-bench 等基准用格式良好的 GitHub issue 做一次性评测,与真实使用中用户多轮追加需求的方式不同。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。