IdeaTaste 评测 LLM 研究品味，匹配率远低于人类
热点事件观察中
IdeaTaste 评测 LLM 研究品味，匹配率远低于人类
1 篇报道1 个报道来源2 天前更新
先了解这件事
AI 综述
IdeaTaste 作者团队发布基准 IdeaTaste，用 2025 年文献快照让大语言模型写研究提案，再与同一社区 2026 年发表的论文比对，以评测其“研究品味”。实验覆盖六个语言模型、四个研究领域、超过 90,000 份提案，LLM 智能体在引用匹配上约为人类水平的 26%，在想法匹配上仅 18%。 团队称，更丰富的领域上下文和更大的群体规模都未能明显缩小差距；盲审专家认为 AI 提案在预期成功度上落后最多。团队已开放持续更新的排行榜。
AI 根据报道生成 · 46 分钟前更新
最新进展11月2日 03:00
IdeaTaste：LLM 能否具备与人类研究者相同的研究品味报道时间线
沿着报道，了解事件的不同侧面。
11月2日
- Hugging Face Daily PapersIdeaTaste：LLM 能否具备与人类研究者相同的研究品味
IdeaTaste 用 2025 年文献快照让 LLM 写研究提案，再与同一社区 2026 年发表的论文比对，以此评测其研究品味。实验覆盖六个语言模型和四个研究领域、超过 90,000 份提案，LLM 智能体在引用匹配上约为人类水平的 26%，在想法匹配上仅 18%。更丰富的领域上下文和更大的群体规模都未能明显缩小差距，盲审专家认为 AI 提案在预期成功度上落后最多；团队已开放持续更新的排行榜。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。