跳到正文
热点事件持续更新

ChemExplain化学解释推理基准发布

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

研究者发布多模态基准 ChemExplain,用于考查模型的"解释性归因"能力:给出分子或反应图像、观察到的化学效应和四个候选解释,让模型选择正确归因。该基准包含 1180 道化学多选题,取自 383 篇同行评审论文。 在 600 道专家复核子集上,最强模型准确率为 78.6%,其 71.4% 的错误被归类为归因失败。归因失败也是开源模型和化学专用模型最主要的错误类型。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月15日
  1. arXiv:cs.AI
    ChemExplain:面向解释性化学推理的多模态基准

    研究者发布 ChemExplain,一个从 383 篇同行评审论文构建的 1180 道化学多选题基准,每题配分子或反应图像、观察到的化学效应与四个候选解释,考查模型的“解释性归因”能力。最强模型准确率为 78.6%;在 600 道专家复核子集上,71.4% 的错误被归类为归因失败,这也是开源模型和化学专用模型最大的错误类型。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。