跳到正文
热点事件持续更新

Percept-V多模态感知评测数据集发布

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

研究者发布 Percept-V 数据集,用于评测多模态大模型的视觉感知能力。该数据集包含 6000 张程序生成、无污染的图像,分为 30 个领域,对应 TVPS-4 框架中的视觉辨别等七种感知技能,推理和知识要求极低。 实验显示,当前最先进的专有和开源多模态大模型表现远低于人类,且图像中物体数量增多时性能快速下降;对开源模型微调有明显提升,但泛化到相关数据集的能力有限。论文已被 COLM 2026 接收。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月5日
  1. arXiv:cs.CL
    Percept-V 基准:多模态大模型在简单感知任务上表现远逊人类

    研究者发布 Percept-V 数据集,包含 6000 张程序生成、无污染的图像,分为 30 个领域,对应 TVPS-4 框架中的视觉辨别等七种感知技能,推理和知识要求极低。实验显示 SoTA 专有和开源多模态大模型表现远低于人类,且图像中物体数量增多时性能快速下降;对开源模型微调有明显提升,但泛化到相关数据集的能力有限。论文已被 COLM 2026 接收。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。