arXiv cs.SE· Anubhav Jangra, Smaranda Muresan·· 3 小时前AI 评分38
DivAlgo：代码生成模型算法多样性系统评估
DivAlgo: A systematic evaluation of algorithmic diversity for code generation models
AI 导读
研究者提出 DivAlgo 基准，包含算法多样化的编程题解数据集，并引入轻量级相似度指标以支持大规模评估。在 24 个现代代码生成模型上的实验发现，无约束生成的代码多样性仅为人类解法的约 31%，即使最佳多样化策略也只能达到人类多样性的约 70%。模型虽可被引导按人类策略生成解法，却无法复现人类解法的多样性，作者指出过度接触模型生成代码可能收窄程序员的算法词汇。
来源：arXiv cs.SE · arxiv.org