跳到正文
热点事件持续更新

ToolRACER数据管线与基准发布

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

Arkajyoti Chakraborty等作者发布ToolRACER,一套协调用户、助手与工具仿真模型生成并验证多轮人机交互的合成数据生成管线,同时构建了ToolRACERBench基准。 ToolRACERBench覆盖六个领域、55种persona,含5.6K条对话轨迹,其中约66%为易失败场景。据作者称,在该基准上训练的模型在τ²-bench与ACEBench上的端到端智能体准确率均有提升,小型语言模型与域内数据集混合时增益显著。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月8日
  1. arXiv:cs.CL
    ToolRACER:用于智能体训练与评估的鲁棒智能体对话仿真资源

    ToolRACER 是一套合成数据生成流程,协同用户、助手与工具仿真模型生成并验证多轮人机交互,构建出覆盖六个领域、55 种 persona、5.6K 条对话轨迹的 ToolRACERBench,其中约 66% 含易失败场景。在 ToolRACERBench 上训练的模型在 τ²-bench 与 ACEBench 上的端到端智能体准确率均有提升,在小型语言模型中与域内数据集混合时增益显著。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。