跳到正文
热点事件持续更新

DivAlgo基准:代码生成模型多样性远逊人类

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

研究者 Anubhav Jangra 与 Smaranda Muresan 提出 DivAlgo 基准,包含算法多样化的编程题解数据集,并引入轻量级相似度指标以支持大规模评估。 在 24 个现代代码生成模型上的实验显示,无约束生成的代码多样性仅为人类解法的约 31%,即使采用最佳多样化策略也只能达到人类多样性的约 70%。模型可被引导按人类策略生成解法,却无法复现人类解法的多样性。作者据此指出,过度接触模型生成代码可能收窄程序员的算法词汇。

AI 根据报道生成 · 49 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月15日
  1. arXiv cs.SE
    DivAlgo:代码生成模型算法多样性系统评估

    研究者提出 DivAlgo 基准,包含算法多样化的编程题解数据集,并引入轻量级相似度指标以支持大规模评估。在 24 个现代代码生成模型上的实验发现,无约束生成的代码多样性仅为人类解法的约 31%,即使最佳多样化策略也只能达到人类多样性的约 70%。模型虽可被引导按人类策略生成解法,却无法复现人类解法的多样性,作者指出过度接触模型生成代码可能收窄程序员的算法词汇。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。