AWS Machine Learning Blog· Khaled Thabit·· 2 小时前精选AI 评分50
修复评测偏差:Property Finder 在 Amazon Bedrock 上选出更优模型
Fix evaluation bias to unlock better models on Amazon Bedrock
AI 导读
Property Finder 发现其视觉 AI 评测集中 96.8% 的标签直接来自现有模型的预测而非人工核验,导致任何替代模型在比较中都处于劣势。
推荐理由
Property Finder 发现 96.8% 评测标签来自旧模型预测,重建人工标注后换模型实现 86% 成本下降,方法可迁移。
来源:AWS Machine Learning Blog · aws.amazon.com