跳到正文
热点事件持续更新

LintEval 基准发布:评测 LLM 的 linter 引导文件重构

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

Tongwei Deng 等作者发布 LintEval,一个覆盖 C++、Python 和 Java 的多语言基准,用于评测大语言模型在 linter 引导下的文件重构能力。该基准包含 13,061 个初始功能正确的程序和 171,662 条由各语言专用 linter 提取的 lint 告警。 据作者介绍,LintEval 同时考察四项指标:功能保持、告警削减、新告警规避和编辑最小化。

AI 根据报道生成 · 48 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月15日
  1. arXiv cs.SE
    LintEval:面向 linter 引导文件重构的 LLM 基准

    LintEval 是一个覆盖 C++、Python 和 Java 的多语言基准,用于评测 linter 引导的文件重构,包含 13,061 个初始功能正确的程序和 171,662 条 lint 告警,同时考察功能保持、告警削减、新告警规避和编辑最小化。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。