研究:代码模型不确定性校准与选择性预测
热点事件持续更新
研究:代码模型不确定性校准与选择性预测
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
Ravishka Rathnasuriya 与 Wei Yang 发表论文,针对缺陷预测与漏洞检测任务,用七种代码模型评估了十三种不确定性信号和三种事后校准方法。 研究发现,强不确定性信号仍可能校准不佳,在高置信度端区分度有限;标准事后校准器虽能改善校准分数,却未必带来更好的选择性预测表现;常用校准指标与选择性预测性能可能不一致,因此需要联合评估。
AI 根据报道生成 · 1 小时前更新
最新进展10月16日 12:00
超越置信度:重新思考深度代码模型中的不确定性校准报道时间线
沿着报道,了解事件的不同侧面。
10月16日
- arXiv cs.SE超越置信度:重新思考深度代码模型中的不确定性校准
一项针对缺陷预测与漏洞检测的系统研究,用七种代码模型评估了十三种不确定性信号和三种事后校准方法。研究发现,强不确定性信号仍可能校准不佳,在高置信度端区分度有限;标准事后校准器虽能改善校准分数,却未必带来更好的选择性预测表现;常用校准指标与选择性预测性能可能不一致,需联合评估。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。