跳到正文
原文
Lilian Weng:Lil'Log(RSS)·· 2024-07-07精选AI 评分63

Lilian Weng 长文解读大语言模型的外在幻觉:成因、检测与缓解方法

Extrinsic Hallucinations in LLMs

AI 导读

Lilian Weng 在 Lil'Log 发表长文,将幻觉聚焦于外在幻觉,即模型输出未被提供的上下文或世界知识支持、编造且不可验证的内容。文章梳理幻觉成因,包括预训练数据中的过时或错误信息,以及微调引入新知识会加剧幻觉(Gekhman et al. 2024 发现模型学会 Unknown 样本后更易幻觉)。

推荐理由

Lilian Weng 系统梳理大语言模型外在幻觉的成因、检测基准与缓解方法,覆盖 RAG、采样、微调等技术路线。

来源:Lilian Weng:Lil'Log(RSS) · lilianweng.github.io