arXiv cs.AI· Xunjian Yin, Tianchen Guan, Jinao Wang, Weili Cao, Daisy Xinlei Lin, Royce Cheng-Yue, Keagan Long, Kyle Wong, Bhuwan Dhingra, Xiangjun Wang, Shuyan Zhou·· 1 天前AI 评分59
BreakingWeb 通过受控环境干预构造更难的浏览器智能体任务
Constructing Challenging Browser-Use Tasks by Controlled Environment Interventions
AI 导读
研究者提出 BreakingWeb，通过可控修改网站内容、服务器状态或渲染页面把已有任务变难，包含 7 个自托管网站上的 519 个任务对。六款浏览器智能体在干预下平均下降 22.9 个百分点，人类仅降 10.0 点；智能体 75% 的失败是信念失败，即在未完成所需改动时宣布任务完成。
来源：arXiv cs.AI · arxiv.org