arXiv cs.SE· Tongwei Deng, Jinyu Zhu, Yue Cao, Chenxu Wang, Yanzhen Zou, Bing Xie·· 3 小时前AI 评分36
LintEval:面向 linter 引导文件重构的 LLM 基准
LintEval: Benchmarking LLMs on Linter-Guided File Refactoring
AI 导读
LintEval 是一个覆盖 C++、Python 和 Java 的多语言基准,用于评测 linter 引导的文件重构,包含 13,061 个初始功能正确的程序和 171,662 条 lint 告警,同时考察功能保持、告警削减、新告警规避和编辑最小化。
来源:arXiv cs.SE · arxiv.org