跳到正文
热点事件持续更新

RoboTalk发布多机器人协作数据集

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

Dorian Benhamou Goldfajn等作者发布RoboTalk——一套合成数据生成流程及数据集,含7,950条多模态轨迹,覆盖53个移动操作厨房任务,用于训练小型视觉语言模型(VLM)进行多机器人通信与协调。 数据集采用leader-follower规划协议,涵盖感知、操作、导航、通信等工具调用,并包含推理轨迹与多样化自然语言通信。作者称,开源模型经该数据集微调后在新任务上达到77%成功率,未微调的开源模型仅约2%。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月9日
  1. arXiv:cs.AI
    RoboTalk:从多模态演示中学习多机器人通信与协调

    RoboTalk 是一个合成数据生成管线与数据集,包含 7,950 条多模态轨迹、覆盖 53 个移动操作厨房任务,用于训练小型 VLM 进行通信与协调。数据集包含 leader-follower 规划协议、工具调用(感知、操作、导航、通信)、推理轨迹与多样化自然语言通信。开源模型在其上微调后在新任务上达到 77% 成功率,而未微调的开源模型成功率仅约 2%。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。