HuggingFace 每日论文Jujia Zhao
UserArena:面向长程购物智能体的交互式用户仿真基准
原标题:UserArena: Benchmarking Interactive User Simulation for Long-Horizon Shopping Agents
论文78
电商购物智能体的离线评测长期受限于缺乏真实长程轨迹及线上对照。UserArena 汇集了 1.1 万名用户的近 6.5 万条会话轨迹与 13 种交互行为,直接锚定生产级 A/B 测试结果展开五层评估。配套提出的在线轨迹蒸馏方法,试图在漫长交互中把离线仿真拉回真实买家的行为节奏。
为什么值得读
将电商智能体的仿真评测与生产环境 A/B 结果直接对齐,为长程交互决策系统的离线验证提供了高置信度的参照系。
标签
Agentic RecommendationUser SimulationE-commerceBenchmarkA/B TestingOffline EvaluationOPTD