跳到正文
热点事件持续更新

StoreBench 直播电商智能体评测环境发布

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

Daksh Raghuvanshi 等作者发布 StoreBench——一个让智能体在生产级电商后端经营中型在线服装店的直播电商环境,用于测试长周期规划与不确定性下的经济判断。 在 11 个场景中,7 个前沿 LLM 均未达到脚本化 smart-triage 策略水平;最佳模型 DeepSeek-V4-Pro 通过 49% 任务种子单元,人类专家以 0.708 平均综合分超过所有模型。 研究团队公开五个训练集示例任务、十条示例轨迹及评分与验证工具,但为保持基准不被污染,完整环境与评测套件未公开。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月9日
  1. arXiv:cs.AI
    StoreBench:用于评估和训练自主运营智能体的直播电商环境

    研究者推出 StoreBench,一个让智能体在电商后端经营中型服装店的直播电商环境,测试长周期规划与不确定性下的经济判断。7 个前沿 LLM 在 11 个场景中均未达到脚本化 smart-triage 策略水平,最佳 DeepSeek-V4-Pro 通过 49% 任务种子单元,人类专家以 0.708 平均综合分超过所有模型。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。