嵌入扰动定位 LLM 推理不确定性
热点事件持续更新
嵌入扰动定位 LLM 推理不确定性
1 篇报道1 个报道来源6 小时前更新
先了解这件事
AI 综述
Qihao Wen 等发表论文,提出用嵌入向量扰动来定位大语言模型推理轨迹中的不确定位置。研究发现,不确定的中间续写更易出现在对前序 token 嵌入扰动高度敏感的 token 上。 论文称,这类基于扰动的指标在定位不确定中间步骤上优于基于概率、采样和贝叶斯的方法,且更简单高效。
AI 根据报道生成 · 2 小时前更新
最新进展10月7日 12:00
通过嵌入向量扰动定位 LLM 推理中的不确定性报道时间线
沿着报道,了解事件的不同侧面。
10月7日
- arXiv:cs.LG通过嵌入向量扰动定位 LLM 推理中的不确定性
一项研究提出用嵌入向量扰动来定位 LLM 推理轨迹中的不确定位置,发现不确定的中间续写更易出现在对前序 token 嵌入扰动高度敏感的 token 上。实验显示,这类基于扰动的指标在定位不确定中间步骤上优于基于概率、采样和贝叶斯的方法,且更简单高效。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。