跳到正文
Hugging Face Daily Papers·· 3 天前精选AI 评分55

规模并非万能:视觉语言模型在部分子任务上出现逆缩放

On the Limits of Scale: Inverse Scaling in Vision-Language Models

AI 导读

研究团队评估四个模型家族的19个视觉语言模型,在八个多模态基准的九个评测划分上每题逐一对比,共完成558,334次模型-问题评测,发现375个子任务-模型对组合出现逆缩放,涉及4,342个较小模型答对而较大模型答错的独特问题。

推荐理由

论文用19个模型、55万余次问答对比,给出逆缩放的具体子任务分布,可作为按任务选模型的依据。

来源:Hugging Face Daily Papers · huggingface.co