DivAlgo基准:代码生成模型多样性远逊人类
热点事件持续更新
DivAlgo基准:代码生成模型多样性远逊人类
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
研究者 Anubhav Jangra 与 Smaranda Muresan 提出 DivAlgo 基准,包含算法多样化的编程题解数据集,并引入轻量级相似度指标以支持大规模评估。 在 24 个现代代码生成模型上的实验显示,无约束生成的代码多样性仅为人类解法的约 31%,即使采用最佳多样化策略也只能达到人类多样性的约 70%。模型可被引导按人类策略生成解法,却无法复现人类解法的多样性。作者据此指出,过度接触模型生成代码可能收窄程序员的算法词汇。
AI 根据报道生成 · 49 分钟前更新
最新进展10月15日 12:00
DivAlgo:代码生成模型算法多样性系统评估报道时间线
沿着报道,了解事件的不同侧面。
10月15日
- arXiv cs.SEDivAlgo:代码生成模型算法多样性系统评估
研究者提出 DivAlgo 基准,包含算法多样化的编程题解数据集,并引入轻量级相似度指标以支持大规模评估。在 24 个现代代码生成模型上的实验发现,无约束生成的代码多样性仅为人类解法的约 31%,即使最佳多样化策略也只能达到人类多样性的约 70%。模型虽可被引导按人类策略生成解法,却无法复现人类解法的多样性,作者指出过度接触模型生成代码可能收窄程序员的算法词汇。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。