Hugging Face Daily Papers· Xinping Lei, Minghao Liu, Ruijie Zhu, Xiaohui Hu, Xingqiao Li, Ao Zhang, Wenhao Chai, Han Li, Tao Wang, Jingyuan Zhang, Enduo Zhao, Yunfeng Shi, Yiming Liang, Zetao Yang, Xingjian Wang, Yifan Yao, Xinkai Ma, Yingru Li, Tianhan Yang, Huan Zhou, Weiran Shi, Shen Yan, Jiaheng Liu, Stephen Huang, Eli Cheung, Weihao Xuan·· 3 天前精选AI 评分60
SWE-CoWork 基准将编码智能体作为数字员工在组织环境中评测
SWE-CoWork: Benchmarking Coding Agents as Digital Employees in Organizations
AI 导读
论文提出 SWE-CoWork 基准,包含 101 项开发任务、101 个真实仓库、11 种编程语言和 12 个应用领域,让智能体在有 26 位模拟同事的工程组织中从简要交接中恢复需求、处理冲突信息并完成实现。
推荐理由
基准把智能体放进模拟组织里考察需求跟踪与协作交付,给出的完成率数据揭示了部分实现与完整交付之间的落差。