产品发布 / 更新普通
CommerceAgentBench：评测智能体真实完成任务能力
原始标题：Most AI benchmarks test whether a model can give the right answer. CommerceAgentBench asks whether a…
内容摘要
Accio 开源 CommerceAgentBench，包含 107 个电商任务，覆盖采购、商品上架、运营、履约和售后，智能体需跨浏览器、邮件、日历、文档、API 和文件操作。评测不依据智能体声称，而是验证其实际修改、保存或提交的结果。最佳运行仅完成 66/107 任务（61.7% 通过率），数据基于 10M SMB 用户、1.6M 对话和 200K 智能体轨迹。
内容分类AI 产品发布与更新
内容层级普通情报
发布时间（北京时间）
本站收录时间（北京时间）
信息来源X：Kim (@kimmonismus)
站内情报编号intel-89ffea11fa3e9088da8c7f6a