研究：事实学习与检索形式可分离

Chaemin Jang、Jihee Kim 和 Dongman Lee 提交的一项 arXiv 研究，通过两阶段训练把“学习事实”与“检索事实”分开：第一阶段让一个模型以五种请求形式接触事实，另一个仅以陈述句形式接触；第二阶段两者用相同的新事实陈述句训练。结果两者从陈述句中检索新事实的表现几乎相同，但在其他请求形式上差异显著。 研究还发现，答案前的上下文状态可决定已学事实能否被检索，且该效应可跨事实与事实关系迁移。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。