研究者提出隐藏身份信息的化学预测评测框架

Yanyi Su等作者提出名为Identity-Blinded Reasoning Diagnostic的化学预测评测框架，用于在隐藏目标实体身份信息的条件下评估化学预测模型。该框架改由已知源实体加显式结构编辑操作来定义目标，而非直接给出目标实体身份。作者称，此举旨在测试模型在无法依赖身份线索时是否仍能完成化学预测。 该框架发布在arXiv的cs.CL分类下，尚属预印本，其实际评测效果未在报道中给出。目前报道仅说明框架的提出与设计思路，未披露具体测试结果或与其他基准的对比数据。 报道称，这一诊断框架的问题设定针对的是化学预测模型对目标实体身份信息的依赖，但其能否有效区分模型能力与记忆，仍有待进一步验证。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。