跳到正文
Hugging Face Daily Papers·· 2 天前精选AI 评分52

iPrefBench:面向个性化移动使用智能体的用户中心基准

iPrefBench: A User-Centric Benchmark for Personalized Mobile Use Agents

AI 导读

研究团队提出 iPrefBench,用于评估移动智能体能否从用户活动历史推断缺失偏好、并在必要时主动询问。该基准基于包含 3,051 条历史活动事件的统一用户画像,覆盖 26 个应用、130 个信息不完整的用户任务,每个缺失需求被设定为可从历史推断或只能询问两类。

推荐理由

论文用可执行 iOS 环境和模拟用户测出智能体在个性化任务上的执行与理解落差,可作为评估个性化智能体的参考。

来源:Hugging Face Daily Papers · huggingface.co