arXiv cs.SE· Yongxiang Hu, Ruiyang Liu, Qining He, Xuan Wang, Yangfan Zhou·· 2 小时前AI 评分58
Hagasu：为 GUI 智能体提供可滚动区域感知以探索隐藏目标
Chart the Invisible: Interactive Perception for Hidden-Target Exploration in GUI Agents
AI 导读
论文提出为 GUI 智能体增加可滚动区域感知能力，在动作选择前先探索视口外的隐藏内容。作者在 667 张 UI 截图的人工采集数据集上训练出多模态模型 Hagasu，可正确识别 78.5% 的可滚动区域；在九个 GUI 智能体上的实验显示，接入 Hagasu 后依赖探索的任务平均端到端完成率从 64.8% 提升到 82.7%。
来源：arXiv cs.SE · arxiv.org