研究者发布MIRROR多模态推理方法与ODA-Data数据集
热点事件持续更新
研究者发布MIRROR多模态推理方法与ODA-Data数据集
1 篇报道1 个报道来源12 小时前更新
先了解这件事
AI 综述
Wen Ye、Yuxiao Qu、Aviral Kumar、Xuezhe Ma 等人发布论文,针对视觉语言模型在文本与图像两种呈现下推理表现不一致的问题,提出强化学习方法 MIRROR,并构建配对的几何数据集 ODA-Data。 MIRROR 的做法是:对每道题在所有视图下评估,选表现最好的视图作为教师,用带 reverse-KL 正则项的 GRPO 任务奖励目标训练其余视图,从而从模型自身不同模态能力中提取跨视图自蒸馏信号。 研究称,在多模态数学推理基准上,MIRROR 优于标准强化学习,跨输入模态的表现更准确、一致。
AI 根据报道生成 · 1 小时前更新
最新进展10月12日 12:00
MIRROR:用跨视图互学提升多模态推理报道时间线
沿着报道,了解事件的不同侧面。
10月12日
- arXiv:cs.AIMIRROR:用跨视图互学提升多模态推理
针对视觉语言模型在文本与图像两种呈现下推理表现不一致的问题,研究者构建了配对多模态几何数据集 ODA-Data,并提出强化学习方法 MIRROR,从模型自身不同模态能力中提取跨视图自蒸馏信号:对每道题在所有视图下评估、选最优视图作教师,用带 reverse-KL 正则项的 GRPO 任务奖励目标训练其余视图。在多模态数学推理基准上,MIRROR 优于标准 RL,跨输入模态表现更准确一致。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。