跳到正文
Hugging Face Daily Papers·· 4 天前精选AI 评分47

Vela:用用户行为作为监督信号提升 LLM 智能

Vela: User Behavior as Supervision Sparks LLM Intelligence

AI 导读

论文提出 Vela 框架,把真实用户行为数据转化为可训练任务与轨迹,从 10 万名用户的匿名行为记录中生成覆盖 91 个真实任务模板的 10 万个任务,经难度过滤与轨迹筛选后保留约 7.5 万个任务。用这些轨迹微调 Qwen3.6-35B-A3B,在用户相关任务上比基座模型最高提升 11.5 分,通用基准平均提升 4 分;微调后再做强化学习,比从基座直接强化学习最高高出 7.7 分。

推荐理由

论文提出用真实用户行为数据构造监督任务,并给出微调与强化学习的具体增益,可供关注用户建模与训练数据来源的读者参考。

来源:Hugging Face Daily Papers · huggingface.co