跳到正文
热点事件持续更新

研究者发布科学文献检索基准RATIO

1 篇报道1 个报道来源15 小时前更新

先了解这件事

AI 综述

研究者 Maayan Sharon 与 Tom Hope 发布科学文献检索基准 RATIO,将检索相关性重新定义为 Address、Broaden、Specify 三类“构思动作”,并公开全部数据、代码、模型与标注。 该基准的数据来自数百万篇计算机科学全文论文,构建方式为话语标记远程监督,再结合大语言模型与人工审核。实验显示,按操作类型微调可显著提升检索器表现,LLM 重排序能进一步提升效果,但仍有较大改进空间;对条件不知情的研究者认为,微调检索器给出的候选更具启发价值。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月15日
  1. arXiv:cs.CL
    RATIO:面向科学文献中类型化构思操作的检索基准

    研究者提出 RATIO,一个面向科学文献构思检索的大规模基准,将相关性定义为 Address、Broaden、Specify 三类"构思动作",数据由数百万篇 CS 全文论文经话语标记远程监督结合 LLM 与人工审核构建。实验显示,按操作微调可显著提升检索器,LLM 重排序进一步提升效果,但仍有较大改进空间;对条件不知情的研究者认为微调检索器的候选更具启发价值。全部数据、代码、模型与标注均已发布。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。