研究团队提出PLC代码生成基准CycleBench与CycleGen
热点事件持续更新
研究团队提出PLC代码生成基准CycleBench与CycleGen
1 篇报道1 个报道来源1 小时前更新
先了解这件事
AI 综述
研究团队提出 CycleBench，一个包含 301 个结构化文本（ST）任务的 PLC 代码生成基准，在每次扫描后对比生成程序与参考程序的输出。团队称，在八个 LLM 上，执行通过率比编译通过率低 11.92 个百分点；若只每五次扫描检查一次输出，会漏掉逐扫描对比所检出的 157 个失败中的 21.66%。 基于这一评测，团队提出 CycleGen，通过多候选生成、编译器反馈修复与运行时自测选择来改进生成，称其执行通过率较直接生成提升 8.68 个百分点。
AI 根据报道生成 · 1 小时前更新
最新进展10月22日 12:00
CycleBench：LLM 生成 PLC 程序的逐扫描执行评测报道时间线
沿着报道，了解事件的不同侧面。
10月22日
- arXiv cs.SECycleBench：LLM 生成 PLC 程序的逐扫描执行评测
研究团队提出 CycleBench，一个包含 301 个 ST 任务的基准，在每次扫描后对比生成程序与参考程序的输出。在八个 LLM 上，执行通过率比编译通过率低 11.92 个百分点；仅每五次扫描检查一次输出，会漏掉逐扫描对比所检出 157 个失败中的 21.66%。基于此提出的 CycleGen 通过多候选生成、编译器反馈修复与运行时自测选择，将执行通过率较直接生成提升 8.68 个百分点。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。