BenchMeUp：从自然语言规格自动构建软件工程基准

Islem Bouzenia 与 Michael Pradel 提出 BenchMeUp，一种从自然语言规格自动构建软件工程基准的方法。其流程是：先生成搜索规则与构建计划，再由并行 LLM 智能体找出候选实例并构建可执行实例，最后在新环境中验证并打包为统一命令行接口。 该论文发表于 arXiv cs.SE，作者称方法可从自然语言规格自动生成基准；报道未给出评估结果或与其他方法的对比数据。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。