跳到正文
AWS Machine Learning Blog· Khaled Thabit·· 2 小时前精选AI 评分50

修复评测偏差:Property Finder 在 Amazon Bedrock 上选出更优模型

Fix evaluation bias to unlock better models on Amazon Bedrock

AI 导读

Property Finder 发现其视觉 AI 评测集中 96.8% 的标签直接来自现有模型的预测而非人工核验,导致任何替代模型在比较中都处于劣势。

推荐理由

Property Finder 发现 96.8% 评测标签来自旧模型预测,重建人工标注后换模型实现 86% 成本下降,方法可迁移。

来源:AWS Machine Learning Blog · aws.amazon.com