跳到正文
热点事件持续更新

研究者提出DataSense-Bench评测AI数据选择能力

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

Yudi Zhang等研究者提出DataSense-Bench基准,用于检验前沿AI模型是否具备“数据感”,即通过数据选择与性能预测任务衡量其判断能力。 该基准允许智能体查看数据、编写并执行分析代码、运行模型前向,但不允许训练模型或接触真实评测任务;基准基于OpenThoughts-Agent与EnvScaler的轨迹,分别在TBLite和BFCL上评测。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月9日
  1. arXiv:cs.LG
    DataSense-Bench:迈向 AI 科学家的重要一步

    研究者提出 DataSense-Bench,用数据选择与性能预测任务检验前沿 AI 模型是否具备"数据感"。智能体可查看数据、编写执行分析代码、运行模型前向,但不能训练模型或接触真实评测任务;基准基于 OpenThoughts-Agent 与 EnvScaler 的轨迹,分别在 TBLite 和 BFCL 上评测。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。