Kurate:用LLM评估已发表研究质量
热点事件持续更新
Kurate:用LLM评估已发表研究质量
1 篇报道1 个报道来源5 小时前更新
先了解这件事
AI 综述
研究团队 Matthew J. Vowels 与 Jamie Cummins 发布预印本,提出用大语言模型评估已发表研究质量的系统 Kurate,其判断会链接到论文及试验注册、协议等文档的原文段落。 Kurate 对 4347 篇论文(3913 篇为随机试验)在统计功效、因果识别、预注册等 8 个维度打分。与 60 份专家标注的临床试验文档相比,协议与结果发表评分点匹配分别为 221/242 和 294/370,AC1 为 0.94 和 0.81。这些数字来自论文自身报告,不代表该系统在其他论文上已获同等验证。
AI 根据报道生成 · 1 小时前更新
最新进展10月7日 12:00
Kurate:可扩展的科学生产质量分析报道时间线
沿着报道,了解事件的不同侧面。
10月7日
- arXiv:cs.CLKurate:可扩展的科学生产质量分析
研究团队推出 Kurate,利用 LLM 评估已发表研究的质量,结合论文及其试验注册、协议等相关文档,并将每项判断链接到对应原文段落。该系统对 4347 篇论文(其中 3913 篇为随机试验)在统计功效、因果识别、预注册等 8 个维度打分。与专家标注的 60 份临床试验文档相比,协议与结果发表评分点的匹配分别为 221/242 和 294/370,AC1 为 0.94 和 0.81。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。