跳到正文
热点事件持续更新

研究者提出J-ICL与FakeContextBench

1 篇报道1 个报道来源5 小时前更新

先了解这件事

AI 综述

研究者提出后训练框架 J-ICL,并发布评测基准 FakeContextBench,用于评测大语言模型判断上下文是否应主导答案的能力。FakeContextBench 覆盖七个领域的伪科学声明。 结果显示,仅靠大规模预训练不足以让模型可靠辨别上下文权威,常见 ICL 微调方法反而使现实准确率相较基座模型最多下降 14.95 个百分点。作者称 J-ICL 将上下文验证纳入训练目标以应对这一权衡。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月15日
  1. arXiv:cs.AI
    当上下文误导:大语言模型中的司法管辖式上下文学习

    研究者提出 FakeContextBench 基准,覆盖七个领域的伪科学声明,用于评测 LLM 判断上下文是否应主导答案的能力。结果显示,仅靠大规模预训练不足以可靠辨别上下文权威,常见 ICL 微调方法反而使现实准确率相较基座模型最多下降 14.95 个百分点。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。