Hugging Face Daily Papers·· 2 天前精选AI 评分52
LASAGNA 框架评估组合式 RAG:单项技术增益难以叠加
Retrieval Augmented Generation Compositionality
AI 导读
研究团队提出开源 RAG 评测框架 LASAGNA,在 8 个基准、5K 至 200K 文档的语料上测试了 450 种配置。结果显示,三项检索技术单独使用时预测可带来 +47% 的提升,组合使用后实际只有 +17%;检索质量与答案忠实度偏好的设计选择并不一致,最优组合还会随语料规模变化。作者据此认为,孤立测得的增益无法可靠预测真实场景表现,新 RAG 技术应在完整流水线中验证。
推荐理由
论文用 450 组配置验证 RAG 各环节技术叠加后的实际收益,为组合式 RAG 评测提供了可复用的开源框架。
来源:Hugging Face Daily Papers · huggingface.co