跳到正文
热点事件持续更新

研究者发布400项专业任务基准OMB

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

Yang Liu等研究者发布 OneMillion-Bench($OMB),一个覆盖法律、金融、工业、医疗和自然科学五大领域、共 400 项专家编写任务的基准,用于评测语言智能体在经济相关场景中的表现;研究者在论文中称,数据和代码可通过其给出的链接获取。 目前报道未给出该基准的评测结果,即语言智能体与人类专家差距的具体结论尚未披露。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月9日
  1. arXiv:cs.CL
    $OneMillion-Bench:语言智能体离人类专家还有多远?

    研究者提出 $OneMillion-Bench($OMB),一个覆盖法律、金融、工业、医疗和自然科学五大领域、共 400 项专家编写任务的基准,用于评测语言智能体在经济相关场景中的表现。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。