Hugging Face Daily Papers·· 3 天前精选AI 评分55
规模并非万能:视觉语言模型在部分子任务上出现逆缩放
On the Limits of Scale: Inverse Scaling in Vision-Language Models
AI 导读
研究团队评估四个模型家族的19个视觉语言模型,在八个多模态基准的九个评测划分上每题逐一对比,共完成558,334次模型-问题评测,发现375个子任务-模型对组合出现逆缩放,涉及4,342个较小模型答对而较大模型答错的独特问题。
推荐理由
论文用19个模型、55万余次问答对比,给出逆缩放的具体子任务分布,可作为按任务选模型的依据。
来源:Hugging Face Daily Papers · huggingface.co