TechCrunch · AI· Lucas Ropek·· 2 小时前AI 评分38
Hugging Face 政策负责人称嵌入式 AI 评估者并非易事
Embedded AI evaluators won’t be an easy solution, Hugging Face’s policy chief says
AI 导读
Hugging Face 首席政策官 Irene Solaiman 在 TechCrunch Disrupt 上表示，模型评测仍是一门演进中的科学，结果能否复现、不同评测之间能否比较都还没有答案，嵌入式评估者生态需要更多标准化。她提到评估对象正从模型本身扩展到包含 harness 和智能体的整个系统，而智能体评测既困难又昂贵，目前针对 harness 的评测数量远少于针对模型的评测。
来源：TechCrunch · AI · techcrunch.com