Hugging Face Daily Papers·· 2 天前精选AI 评分52
Halcyon:不依赖语言预训练的文生图自回归模型
Text-to-Image Generative Modeling Without Language Pretraining
AI 导读
斯坦福团队提出 Halcyon 系列早期融合多模态自回归模型,完全在 1 亿图文对的 GPIC 数据集上从零预训练,不依赖大规模语言预训练。
推荐理由
论文用受控实验说明纯文本预训练对文生图没有增益,并给出从零训练可比的算力对比。
来源:Hugging Face Daily Papers · huggingface.co