arXiv cs.SE· Shuo Wang, Guodong Fan, Ming Zhu, Jing Li, Chun Wang·· 5 小时前AI 评分31
SCCGBench：面向真实 Web 服务调用代码生成的可执行性评测基准
SCCGBench: Executability-Oriented Evaluation for Real-World Web Service-Call Code Generation
AI 导读
研究者发布 SCCGBench，一个包含 3,135 个来自真实 GitHub 仓库、可追溯且经去污染过滤的 RapidAPI 调用函数的服务调用代码生成基准，并提出 Mock、Robust、ParamF1 及 host、endpoint、method、参数级诊断指标。
来源：arXiv cs.SE · arxiv.org